大数据字段更新问题求教

化身天 2015-04-02 11:07:57

两张表
A表
id number(20)
batch_code varchar(20)
B表
id number(20)
batch_code varchar(20)

A表数据大概1亿2千万，B表大概7千W，两表batch_code字段关联,B表中数据均是出自A表，只是id不一样

现在想根据batch_code 将B表的所有数据的ID更新为A表的ID，有没有什么比较快速的方法，1个小时以内，

试过游标分批处理，但是还是很慢差不多要20多个小时

...全文

381 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

jdsnhan 2015-04-03

打赏
举报

回复

尝试把B表干掉，通过A表重新创建B表，可以不

Hive的元数据管理是另一个重点，书中有专门的章节讲述如何管理和维护数据库、表和字段的元数据，这对于理解Hive的工作原理至关重要。同时，也会讨论如何使用Hive的视图和存储过程来增强数据处理的灵活性。在数据...

大数据工程师(开发)面试 1.HBase和Hive都是基于Hadoop，为什么Hive查询起来非常慢，但HBase不是？ Hive是类SQL引擎，其查询都需要遍历整张表，跑MapReduce自然很慢，但HBase是一种NoSQL的列式数据库，基于Key/...

想问下大家一般是采用那种方式来实现应用的改造比较合适，求教~~~各位大佬，有用过hive处理递归么？请问一个表，不分区，只分一个桶的缺点是什么呢？群里面有面试过外包的吗大数据请教一下，hive，我用insert into...

`create_at` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '创建时间', `update_at` int(10) unsigned NOT NULL DEFAULT '0' COMMENT '更新时间', `deleted` tinyint(1) NOT NULL DEFAULT '0', `time_of_day` ...

最近碰到一个很玄学的问题，就是我的CDH集群中部署的hive，在hue上可以执行hive查询语句，但是到hiveshell中不能执行！废话不多说直接看报错图吧猛的一看以为缺啥jar包，但是想想不应该啊，我用...然后各种求教

17,134

社区成员

55,257

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章