-
等级
本版专家分：35结帖率 100% -
大家好，来csdn有段时间了，以后会在http://blog.csdn.net/zwto1 写更多好文章出来，受益于牛人博客，希望大家能多多指教，该博客关注java、hadoop及其周边技术，希望能结交更多的同道中人！
展开阅读全文
-
等级
本版专家分：2743 -
您现在使用 hadoop主要处理些什么情景呢？
楼主你那里是如何应用的？多写写，我找时间看看。
-
等级
本版专家分：35
-
现在主要是对网络日志的数据提取和处理 好的 有时间我就会把自己在学习和使用过程的经验总结 写出来 还望指正 建议
- hadoop的安装-----伪分布式
1.hadoop的伪分布安装 1.1 设置ip地址 执行命令 service network restart 验证: ifconfig 1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables status 1.3 关闭防火墙的自动运行 执行命令 ...
- Hadoop专业解决方案-第1章 大数据和Hadoop生态圈
非常感谢Hadoop专业解决方案群：313702010，兄弟们的大力支持，在此说一声辛苦了，经过两周的努力，已经有啦初步的成果，目前第1章 大数据和Hadoop生态圈小组已经翻译完成，在此对：译者：贾艳成 QQ：496830205 ...
- Hadoop专业解决方案-第一章 大数据和Hadoop生态圈
本章节由《Hadoop专业解决方案群：313702010》翻译小组完成，为小组校验稿，已经通过小组内部校验通过，特此面向网络征集意见，如果对本章节内容有任何异议，请在评论中加以说明，说明时，请标明行号，也可以以修订...
- Hadoop 之上的数据建模 - Data Vault 2.0
对比传统的基于 RDBMS 之上的数据仓库和商业智能项目，尝试着说说，Hadoop 之上的数据仓库，从ETL, 数据存储，到分析展现。重点围绕数据建模方面做分析，因为这是本文的重点，介绍一份新的数据建模方式 Data Vault ...
- Hadoop 2.x与Hadoop 3.x之间的功能比较
Hadoop 2.x与Hadoop 3.x之间的功能比较1.JDK要求2.HDFS支持纠删码3.YARN Timeline Service版本更新到v.24.重写相关shell脚本，比如所有脚本都以hadoop-env.sh为基础脚本等等5.合并客户端jar，比如使用maven的shaded...
- 菜鸟的java学习-------第一篇初识java
现在的大数据很火，大数据是基于java进行开发，例如hadoop。以后大数据铁定是主流，因为大数据的推广能提高信息交互的效率，大数据的应用充满着无数的商机。基于市场的需求和对更快开发的主流语言的掌握，j
- 11 综合项目-网站日志数据分析系统
通过对移动APP的下载数据量进行统计分析，可得出应用程序的受欢迎程度，可通过不同维度进行更深层次的数据分析，为运营分析与推广决策提供可靠的数据依据。 系统架构设计及效果预览 将Nginx服务器所产生的日志文件...
- Hadoop
Hadoop大数据生态系统 实验教程 第1章 欢迎来到大数据的世界 1.1 拥抱大数据 当今的社会，是一个信息大爆炸的社会，社会在高速发展，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大量的数据在...
- 大数据各组件理论性总结---spark和hadoop(将持续更新)
Hadoop和spark的起源 Hadoop起源 1998年9月4日，Google公司在美国硅谷成立。正如大家所知，它是一家做搜索引擎起家...Lucene是用JAVA写成的，目标是为各种中小型应用软件加入全文检索功能。因为好用而且开源（代码公...
- 用Hadoop构建电影推荐系统
用Hadoop构建电影推荐系统 2013-10-21 10:31| 发布者: 天空之城| 查看: 18598| 评论: 1|原作者: 张丹(Conan)|来自: 张丹的粉丝博客 摘要: Netflix电影推荐的百万美金比赛，把“推荐”变成了时下最...
- Hadoop简介
毕业前就听说了Hadoop，今天突然想了解一下，在网上搜集一些关于Hadoop的介绍，顺便把它整理一下，发在博客上和网友分享，高手勿喷。 一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层...
- 《hadoop进阶》web日志系统 KPI指标的分析与实现
推广一下个人的微信公众号【搜索与推荐Wiki】 转载请注明出处： 转载自 T...
- 完整全面的Java资源库-----转载
构建 这里搜集了用来构建应用程序的工具。 Apache Maven：Maven使用声明进行构建并进行依赖管理，偏向于使用约定而不是配置进行构建。Maven优于Apache Ant。后者采用了一种过程化的方式进行配置，所以维护起来...
- Hadoop入门参考链接汇集
快速入门 硬件错误 流式数据访问 大规模数据集 简单的一致性模型 移动计算比移动数据更划算 异构软硬件平台间的可移植性 Namenode 和 Datanode 文件系统元数据的持久化 ...Hadoop MapReduce软件框架1
- hadoop之日志分析
需求：通过分析论坛日志，计算论坛关键指标，供运营者决策。 这个日志有五个字段：IP，访问时间，访问资源，访问状态，本次流量。 ***浏览量PV 定义：页面浏览量即为PV(Page View)，是指所有用户浏览页面的...
- Java工程师学习指南（2019最新版）
写过一个Java工程师学习指南，我把它分为了四个部分，第一步是打好Java基础，掌握Java核心技术，第二步是掌握Java Web技术栈，能够做一些项目，第三步是掌握Java方面的进阶技术，包括网络编程、并发编程、JVM等，第...
- Apache Hadoop 3.0.0 GA版正式发布，可以部署到线上
今天凌晨 Apache Hadoop 3.0.0 GA 版本正式发布，这意味着我们就可以正式在线上使用 Hadoop 3.0.0 了！这个版本是 Apache Hadoop 3.0.0 的第一个稳定版本，有很多重大的改进，比如支持 EC、支持多于2个的...
- 学习Hadoop第三十五课（综合练习）
上节课我们一起学习了自动化采集工具Flume，这节课我们一起来把我们前面学习的知识综合起来，做一个小项目。 第一部分：项目分析 ...日志文件中的内容如下（仅拿出来两行内容），可以看到一共有5列，每
- 大数据教程（一）—— Hadoop集群坏境搭建配置
前言 关于时下最热的技术潮流，无疑大数据是首当其中最热的一个技术点，关于大数据的概念和方法论铺天盖地的到处宣扬，但其实很多公司或者技术人员也不能详细的讲解其真正的含义或者就没找到能被落地实施的可行性...
- Hadoop学习之PageRank算法并行实现
同时，我也在做Google的SEO，推广自己的博客。经过几个月尝试，我的博客PR到2了，外链也有几万个了。总结下来，还是感叹PageRank的神奇！ 改变世界的算法，PageRank！ 目录 PageRank算法介绍 PageRank...
- Hadoop之父Doug Cutting：Lucene到Hadoop的开源之路
Hadoop之父Doug Cutting：Lucene到Hadoop的开源之路 Doug Cutting，凭借自己对工作的热情和脚踏实地的态度，开创了Lucene和Nutch两个成功的开源搜索引擎项目，同时也是当下人气大数据计算框架 Hadoop的创立者。Doug...
- 【向Linux迁移记录】Deepin下java、大数据开发环境配置【一】
文章目录前言安装java环境eclipse安装配置eclipse启动图标并添加到桌面配置mavenMySQL数据库安装VMWare安装Virtual machine monitor failed导致无法启动VMWare解决如何卸载VMWareVMware最小化安装centos 搭建集群...
- Nuth | Hadoop完全分布式运行 学习笔记
hdfs://10.66.27.18.:9000/user/hadoop/urldir url.txt -->http://blog.tianya.cn hdfs://10.66.27.18.:9000/user/hadoop/urldir url2.txt -->http://bbs.tianya.cn 直接生成：bin/nutch crawl urldir -dir c
- 大数据和Hadoop生态圈
非常感谢Hadoop专业解决方案群：313702010，兄弟们的大力支持，在此说一声辛苦了，经过两周的努力，已经有啦初步的成果，目前第1章 大数据和Hadoop生态圈小组已经翻译完成，在此对：译者：贾艳成 QQ：496830205 ...
- Hadoop Windows 搭建开发环境[转]
Hadoop Windows 搭建开发环境[转] Hadoop 2010-07-04 11:24:20 阅读844 评论0 字号：大中小 订阅 在 Windows 平台下部署 Hadoop 开发环境 魏仁言 2010.6.8 Hadoop 是一个...
- Android开发入门60个小案例+源代码
适合初学者，大量简单小例子，完整源代码。
- 亚太数学建模（APMCM）历年赛题与优秀论文14-18年.zip
亚太数学建模（APMCM）历年优秀论文
- C语言及程序设计初步
课程针对没有任何程序设计基础的初学者，全面介绍C语言及利用C语言进行程序设计的方法。课程注重知识的传授，更关注学习者能够通过实践的方式，真正学会利用C语言解决问题，奠定程序设计的基础。为此，专门设计了实践方案，指导学习者在听讲的同时，有效完成实践。讲课中还适时穿插进行学习指导，帮助初学者尽快掌握程序设计的学习方法。 课程主要针对无任何编程经历的初学者，利用主讲者多年来教授大一学生的教学经验，准确把握知识点掌握中的难点，在和视频配套的实践方案配合下，帮助初学者顺利掌握知识，获得学习中的自信。
- python爬虫20个案例
讲诉python爬虫的20个案例 。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
- c++经典代码大全 清晰版
c++经典代码大全 适合C++新手看的经典代码！！！