两个表数据处理问题

2013-12-28 02:28:30 176 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

MySQL之优化进阶：ALTER TABLE操作与数据处理技巧大家好！一直以来，我都希望能和各位技术爱好者在学习的道路上携手共进，共同攻克技术难题。在MySQL的使用过程中，我们会遇到各种各样的性能优化问题，今天咱们就聚焦在ALTER TABLE操作的优化以及一些相关的数据处理技巧上。希望通过这篇文章，能帮助大家更好地理解和处理这些问题，提升MySQL数据库的性能和使用体验。阅读详情

请帮忙看看:

一、有2个表，
表1：MainTable (现有记录数在10万条左右)
字段：
id bigint自动编号
Title nvarchar(30)
SubId nvarchar(max)

表2：SubTable （现有记录数在300万条左右）
字段：
id bigint自动编号
Description nvarchar(100)

二、现在需要做的是，判断MainTable中的Title是否出现在SubTable表的Description中，如果有的话，则将SubTable的ID值记录到MainTable表的Subid中。

三、现在用VBS的实现方法是：
sql = "select id from SubTable Where Description like '%" & Title & "%' order by id"
rs.open sql,conn,1,1
然后再通过rs.movenext一条一条记录SubTable的id号后再存到MainTable的SubId字段中
这种方法目前可以实现想要的效果，可是太慢，平均1秒中才能完成MainTable的一条记录模糊匹配，10万条记录需要100000秒，全部处理完大概需要27个小时，非常慢。

请问有没有其他办法来实现？

...全文

常学常新：《Attention Is All You Need》万字解读！常学常新：《Attention Is All You Need》万字解读！阅读详情

AMinfo

MS-SQL Server 34,876 成员 254,635 内容

+ 关注 + 加入社区

切换为时间正序

AMinfo 2013-12-28

打赏
举报

麻烦帮忙再看看 http://bbs.csdn.net/topics/390680794

AMinfo 2013-12-28

打赏
举报

非常感谢2位，基于这2个表再延申还有一个问题，另外开了一贴

LongRui888 2013-12-28

打赏
举报

进一步，修改为update操作：

create table MainTable(Id int, Title varchar(20),SubId varchar(100))

insert into MainTable
select 1  ,'A',       0 union all
select 2  ,'B',       0 union all
select 3  ,'C',       0 union all
select 4  ,'D',       0 union all
select 5  ,'E',       0


create table SubTable(Id int,Description varchar(20))

insert into SubTable
select 1  ,'ABC' union all
select 2  ,'AB' union all
select 3  ,'CD' union all
select 4  ,'EA'
go

--修改数据
update MainTable 
set SubId =cast(MainTable.SubId as varchar) +        
		   (select ','+ CAST(t.ID as varchar)
				  from SubTable t
				  where t.Description like '%'+MainTable.Title+'%'
				  for xml path('')
		   )


--查询修改后的数据
select * from MainTable
/*
ID	title	SubId
1	A	0,1,2,4
2	B	0,1,2
3	C	0,1,3
4	D	0,3
5	E	0,4
*/

LongRui888 2013-12-28

打赏
举报

create table MainTable(Id int, Title varchar(20),SubId int)

insert into MainTable
select 1  ,'A',       0 union all
select 2  ,'B',       0 union all
select 3  ,'C',       0 union all
select 4  ,'D',       0 union all
select 5  ,'E',       0


create table SubTable(Id int,Description varchar(20))

insert into SubTable
select 1  ,'ABC' union all
select 2  ,'AB' union all
select 3  ,'CD' union all
select 4  ,'EA'
go


select distinct
       ID,
       title,
       cast(m.SubId as varchar) + 
       
       (select ','+ CAST(t.ID as varchar)
              from SubTable t
              where t.Description like '%'+m.Title+'%'
              for xml path('')
       ) as SubId
       
from MainTable m
/*
ID	title	SubId
1	A	0,1,2,4
2	B	0,1,2
3	C	0,1,3
4	D	0,3
5	E	0,4
*/

Leon_He2014 2013-12-28

打赏
举报


select 1 Id,'A' Title,convert(varchar(max), '0') SubId
into #MainTable
union all select 2 ,'B','0'
union all select 3 ,'C','0'
union all select 4 ,'D','0'
union all select 5 ,'E','0'

 select 1 id ,'ABC' Description
into #SubTable
union all select 2 ,'AB'
union all select 3 ,'CD'
union all select 4 ,'EA'

select *
from #MainTable

update b
set SubId=convert(varchar(20),subid) +(select ','+ convert(varchar(20),a.id) from #SubTable  a where CHARINDEX(b.Title,a.Description,1)>0
for xml path('') )
from #MainTable b

select *
from #MainTable

result:
/*
1	A	0,1,2,4
2	B	0,1,2
3	C	0,1,3
4	D	0,3
5	E	0,4
*/

try this

LongRui888 2013-12-28

打赏
举报

引用 4 楼 AMinfo 的回复:

谢谢！求存储过程

上面的 0,1,2,4 这个0是哪儿来的呢

AMinfo 2013-12-28

打赏
举报

谢谢！求存储过程

无涯大者 2013-12-28

打赏
举报

路过,菜鸟初学阶段,帮大牛顶下!!

AMinfo 2013-12-28

打赏
举报

需要实现的结果为：表MainTable： Id Title SubId 1 A 0,1,2,4 2 B 0,1,2 3 C 0,1,3 4 D 0,3 5 E 0,4

AMinfo 2013-12-28

打赏
举报

表MainTable： Id Title SubId 1 A 0 2 B 0 3 C 0 4 D 0 5 E 0 表SubTable： Id Description 1 ABC 2 AB 3 CD 4 EA 需要实现的结果为：表MainTable： Id Title Table1Id 1 A 0,1,2,4 2 B 0,1,2 3 C 0,1,3 4 D 0,3 5 E 0,4

两个表数据处理问题

相关推荐