最近参加一个大数据竞赛，各位有没有啥思路

山里的老王 2019-07-24 06:22:26
这个竞赛是用大数据来处理550万条流量数据，从中找出攻击数据。用hadoop能解决吗？
...全文
575 1 打赏 收藏 转发到动态 举报
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
RivenDong 2019-09-07
  • 打赏
  • 举报
 回复
这个题和KDD CUP 99的题很相似，网上有很多关于KDD CUP99数据的各类源码，如果处理该题没有什么思路的话，你可以参考KDD CUP 99 竞赛。
浙大某同学参加阿里巴巴大数据竞赛的分享
参赛者反思在阿里大数据竞赛中过度依赖复杂模型的问题，强调理解业务和数据的重要性，并分享了从比赛中获得的经验教训。
【开车了】9个大数据竞赛思路分享
本文分享了作者在过去一年半中参与的多个算法竞赛的经验，包括移动推荐算法、资金流入流出预测等赛题的分析、建模及优化策略。
天池商铺定位数据挖掘竞赛思路总结
本文围绕天池商铺定位数据挖掘竞赛展开，介绍赛题是根据用户手机搜到的wifi等信息预测其交易时所在店铺。作者分享分析思路与操作结果，通过优化wifi距离计算方法、借鉴开源代码、挖掘时间维度特征等提升预测准确率，还总结了比赛中的经验教训，如使用pandas注意事项、处理大数据的方法等。
Hadoop生态社区

20,842

社区成员

4,695

社区内容

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区，致力于有Hadoop，hive，Spark，Hbase，Flink，ClickHouse，Kafka，数据仓库，大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章