请教一下，想自学大数据，可分析的数据去哪里找呢？

[hupo1982]

想自学一下大数据分析，也根据手册自己搭建了Handoop这些的服务器，可现在问题是没有用来分析的数据，互联网公司会有海量的数据，但对于自学者来说，去哪里找能够达到几十G规模的数据呢？
全部自己从网上爬吗，可从互联网上爬几十G的数据这个数据整合和去脏的工作就搞死人吧
想请教一下有没有这方面的公共资源。

[火山1]

网络工具抓包 发包

[LinkSe7en]

爬虫。 我学习大数据，就是写个爬虫爬取新闻站，结果存到HBase里，再通过Spark去进行自然语言分析，结果写到MySQL。 后来再高端点的是爬虫写到Kafka上，然后通过Storm实时进行预处理，写到HBase里，Spark再进行跑批

[feitianxiaozi]

哇哦。棒棒哒。学习中。。。。

[shiter]

大数据很大程度上将，数据清洗会占很大一部分