社区
疑难问题
帖子详情
数据重复问题
快乐猪猪侠
2010-12-03 05:00:48
向A表中导入txt文件全量导入,A表中就开始有重复的记录了,
我要删除这些重复,删除A表与txt导入记录相同的,但只把A表里那个删除何留txt导入的记录。
...全文
60
9
打赏
收藏
数据重复问题
向A表中导入txt文件全量导入,A表中就开始有重复的记录了, 我要删除这些重复,删除A表与txt导入记录相同的,但只把A表里那个删除何留txt导入的记录。
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
9 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
快乐猪猪侠
2010-12-06
打赏
举报
回复
快高手,顶一下!
快乐猪猪侠
2010-12-04
打赏
举报
回复
A表结构:
商品代码 商品名称 系数 品类
00001 红河 10 烟
00002 白沙 10 烟
导入的txt和这个表的结构完全一样,导入后的结果如下。系数11的是导入的,把系统是10的删除,
商品代码 商品名称 系数 品类
00001 红河 10 烟
00002 白沙 10 烟
00001 红河 11 烟
00002 白沙 11 烟
最后A表的结果
商品代码 商品名称 系数 品类
00001 红河 11 烟
00002 白沙 11 烟
dawugui
2010-12-03
打赏
举报
回复
[Quote=引用 6 楼 btlcm 的回复:]
没有自动增加列的情况下
[/Quote]
最好给出完整的表结构,测试数据,计算方法和正确结果.否则耽搁的是你宝贵的时间。
如果有多表,表之间如何关联?
发帖注意事项
http://topic.csdn.net/u/20091130/21/fb718680-98ff-4afb-98d8-cff2f8293ed5.html?24281
快乐猪猪侠
2010-12-03
打赏
举报
回复
没有自动增加列的情况下
guguda2008
2010-12-03
打赏
举报
回复
如果是全部列重复,假设表名为TB
SELECT DISTINCT * INTO #TB FROM TB
TRUNCATE TABLE TB
INSERT INTO TB SELECT * FROM #TB
DROP TABLE #TB
如果是部分列重复,需要有一列区分是否是导入的,或者有一列时间列可以判断只保留时间最新的一条。
dawugui
2010-12-03
打赏
举报
回复
假设有个自增列ID,假设按照某关键字COL删除ID不是最大的数据.
delete tb from tb t where id not in (select max(id) from tb where col = t.col)
delete tb from tb t where not exists (select 1 from tb where col = t.col and id > t.id)
假设是按照多列删除数据.
delete tb from tb t where not exists (select 1 from tb where col1 = t.col1 and col2 = t.col2 and id > t.id)
dawugui
2010-12-03
打赏
举报
回复
假设有个自增列ID,假设按照某关键字COL删除ID不是最大的数据.
delete tb from tb t where id not in (select max(id) from tb where col = t.col)
guguda2008
2010-12-03
打赏
举报
回复
重复是指的全部列重复还是部分列重复
「已注销」
2010-12-03
打赏
举报
回复
表结构测试数据
spark写入es出现部分
数据
重复
问题
排查和解决
由于是长期正常运行的作业未发生变更,且排查了上游hive表不存在
数据
重复
问题
,首先排除了
数据
和逻辑
问题
spark作业是运行成功的,不存在作业失败重试的
问题
推测是spark作业内部存在失败重试的
问题
,于是查看了...
PageHelper分页
数据
重复
问题
解决
测试发现后台使用PageHelper进行oracle
数据
分页查询时会出现几页
重复
数据
,如当翻到第三、第四页时候发现仍展示为第二页的
数据
内容...因此,在order by排序时增加主键排序即可解决PageHelper分页查询
数据
重复
问题
。 ...
clickhouse出现
数据
重复
问题
在生产环境中,偶然发现clickhouse
数据
表中出现
重复
数据
,并且都是
重复
的两条
数据
,重重迷雾,疑窦重生...
新增、修改判断
数据
重复
问题
新增、修改判断
数据
重复
问题
1、
问题
需求 操作 需求 新增 新增的
数据
不能在
数据
库中存在,存在则不能新增 修改 修改的
数据
是提交的当前
数据
则提交成功、修改的
数据
排除它本身在其他
数据
中也不存在才可以...
使用springjpa查询
数据
重复
问题
使用springjpa查询
数据
重复
问题
1,使用springjpa查询
数据
库
数据
,通过原生态的sql查询多条
数据
,
数据
结果通过实体类获取结果,但是
数据
是
重复
,使用方式如下图 2,错误原因:实体类中,设置的@Id主键id,缺少注解@...
疑难问题
22,210
社区成员
121,726
社区内容
发帖
与我相关
我的任务
疑难问题
MS-SQL Server 疑难问题
复制链接
扫一扫
分享
社区描述
MS-SQL Server 疑难问题
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章