社区
脚本语言
帖子详情
一千万条600m的csv文件,用Python排序处理常规方法可行么
江疾.
2019-07-24 11:45:20
手上有个巨大的csv要排序,但是不知道直接写csv的排序可行不可行
...全文
117
3
打赏
收藏
一千万条600m的csv文件,用Python排序处理常规方法可行么
手上有个巨大的csv要排序,但是不知道直接写csv的排序可行不可行
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
江疾.
2019-07-24
打赏
举报
回复
求大神。。。。。。。。。。。。
tianfang
2019-07-24
打赏
举报
回复
分块(比如 1万条)排序,然后排序后的多个序列,两两合并,可以使用并发处理进行加速。
小羽Jary
2019-07-24
打赏
举报
回复
600M最多也就几亿行数据吧,太大可以上spark的daatframe来排序,比python会快。
python
数据分析基础
8个常用
python
工具库 + 10小时以上视频课程 + 50个工作常用技能 + 4个爬虫案例 + 10个行业数据分析案例, 介绍
python
数据分析、爬虫基础技巧, 助你提升职场竞争力, 转行、应聘简历加分。 课程介绍
python
数据读取、...
把一个
csv
数据
文件
,第一行头
文件
(字段名)不变,按某列(第四列)降序排列,另行保存为
csv
文件
...
点击上方“
Python
共享之家”,进行关注回复“资源”即可获赠
Python
学习资料今日鸡汤日暮汉宫传蜡烛,轻烟散入五侯家。大家好,我是皮皮。一、前言前几天在
Python
白银交流群有个叫【大...
Python
网页抓取教程
在之前的文章中我们介绍了怎么用C#和JAVA两种
方法
来抓取网页,这一期给大家介绍一种更容易,也是使用最广泛的一种抓取
方法
,那就是
Python
。 说起
Python
,大家应该并不陌生,它是目前入门最简单的一种
方法
了,因为它...
python
爬取网页的
方法
总结,
python
爬虫获取网页数据
在之前的文章中我们介绍了怎么用C#和JAVA两种
方法
来抓取网页,这一期给大家介绍一种更容易,也是使用最广泛的一种抓取
方法
,那就是。但是,标准
Python
HTTP库难以使用,为了提高效率,需要大量代码行,这进一步加剧...
用
python
抓取一个网页的xhr,
python
爬取网站数据代码
在之前的文章中我们介绍了怎么用C#和JAVA两种
方法
来抓取网页,这一期给大家介绍一种更容易,也是使用最广泛的一种抓取
方法
,那就是。我们的第二次搜索查找文档中的所有标签(被包括在内,而像这样的部分匹配则不被...
脚本语言
37,720
社区成员
34,239
社区内容
发帖
与我相关
我的任务
脚本语言
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
复制链接
扫一扫
分享
社区描述
JavaScript,VBScript,AngleScript,ActionScript,Shell,Perl,Ruby,Lua,Tcl,Scala,MaxScript 等脚本语言交流。
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
试试用AI创作助手写篇文章吧
+ 用AI写文章