你好,游客 登录
rss订阅 手机访问 
Hadoop
公司的大数据业务为什么都基于Hadoop方案
  现在不管是在国内外的大公司,对于大数据都是非常的渴望,会想尽所有的办法搜集一切的数据,由于现代信息的不对称从而导致不断的数据变化,大量的信息是可以通过数据分析获取。选择Hadoop的原因主要有以下三点:1.降低成本;2.生态圈成熟;3.可以解决问题。
日期:06/25/2014 08:58:37 作者:
大数据处理为何选择Spark,而不是Hadoop
  Spark是一个用来实现快速而通用的集群计算的平台。在速度方面,Spark扩展了广泛使用的MapReduce计算模型,而且高效地支持更多计算模式,包括交互式查询和流处理。
日期:今 10:45 作者:佚名
零基础学习大数据,搭建Hadoop处理环境
  由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知识介绍。
日期:今 10:38 作者:
Hadoop跑满状态下的Yarn资源管理谈
Hadoop跑满状态下的Yarn资源管理谈
日期:01月18日 作者:
Hadoop MapReduce优化和资源调度器
Hadoop MapReduce优化和资源调度器
日期:01月16日 作者:溯水心生
Hadoop单步debug追源码
Hadoop单步debug追源码
日期:01月16日 作者:
大数据学习系列之八----- Hadoop、Spark、HBase、Hive搭建环境遇到的错误以及解决方法
  在搭建大数据Hadoop相关的环境时候,遇到很多了很多错误。我是个喜欢做笔记的人,这些错误基本都记载,并且将解决办法也写上了。因此写成博客,希望能够帮助那些搭建大数据环境的人解决问题。
日期:01月16日 作者:
Hadoop大数据分析应用场景
  为了满足日益增长的业务变化,京东的京麦团队在京东大数据平台的基础上,采用了Hadoop等热门的开源大数据计算引擎,打造了一款为京东运营和产品提供决策性的数据类产品-北斗平台。
日期:01月15日 作者:
离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
  CDH是Cloudera Distribution Hadoop的简称,顾名思义,就是cloudera公司发布的Hadoop版本,封装了Apache Hadoop,提供Hadoop所有的服务,包括HDFS,YARN,MapReduce以及各种相关的components:HBase, Hive, ZooKeeper,Kafka等。
日期:01月11日 作者:
分布式计算框架Hadoop原理
  Hadoop是Apache软件基金会所开发的并行计算框架与分布式文件系统。最核心的模块包括Hadoop Common、HDFS与MapReduce。HDFSHDFS是Hadoop分布式文件系统(Hadoop Distributed File System)的缩写,为分布式计算存储提供了底层支持。
日期:01月05日 作者:
Hadoop的RPC设计分析
  之前鼓捣Hbase的时候,觉得单机和伪分布式模式太low了,就在笔记本上用三个虚拟机搭建了一个“完全分布式”的Hbase环境(心疼破本子一秒钟)。刚好趁这个元旦假期,我就研究了一下Hadoop。
日期:01月04日 作者:
Hadoop系列学习笔记(一)HDFS架构
  本篇文章翻译了Hadoop系列下的HDFS Architecture,原文最初经过笔者翻译后大概有6000字,之后笔者对内容进行了精简化压缩,从而使笔者自己和其他读者们阅读本文时能够更加高效快速的完成对Hadoop的学习或复习。
日期:01月04日 作者:time刺痛你的眼
hadoop3.0 Yarn支持网络资源:network原理设计文档说明
  开始在学习之前,其实需要一定的基础,因为Yarn里面使用了Linux TC和Cgroup。其实这两个不是新鲜的概念,很多人已经通过他们控制Linux流量,而这里hadoop官方将他们应用于Yarn。
日期:01月03日 作者:
CentOS中Hadoop单机伪分布式配置
CentOS中Hadoop单机伪分布式配置
日期:12/28/2017 10:53:59 作者:
Centos下docker搭建Hadoop集群
  随着业务发展需要,数据量的逐步提升,需要用到Hadoop来处理一些数据,所以搭建一个Hadoop集群,搭建Hadoop集群需要多台主机,但是由于资源有限,所以刚好可以利用近些年比较火的docker来搭建,用docker搭建也有一个好处,就是一次构建多节点重复利用。
日期:12/28/2017 10:53:07 作者: