欢迎投稿

今日深度:

Hadoop RPC,

Hadoop RPC, remote procedure call,远程过程调用 不同进程之间的方法调用 hadoop namenode、datanode等之间的通信依赖rpc Server端 import java.io.IOException; import org.apache.hadoop.HadoopIllegalArgumentException; im...(发布于2020-01-04 23:16:08)

Hadoop学习指南,

Hadoop学习指南, 安装配置 CDH4(hadoop2.0) 端口 CDH4 HA配置官方文档 浅谈flume log4j appender部署 开发 cdh maven仓库   --持续更新...(发布于2020-01-04 23:16:05)

hadoop视频教程,

hadoop视频教程, Hadoop是什么,为什么要学习Hadoop? Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的...(发布于2020-01-04 23:16:00)

Hadoop安装部署,

Hadoop安装部署,   http://www.kuqin.com/system-analysis/20081023/24034.html 1. Hadoop安装部署 1.1. 机器说明 总共4台机器:test161.sqa,test162.sqa, test163.sqa,test164.sqa IP地址分别为:192.168.207.161 …… 192.168...(发布于2020-01-04 23:15:50)

hadoop面试题,

hadoop面试题, 1、介绍一下Hadoop的框架 存储hdfs,计算框架MapReduce,资源管理Yarn 2、简单说下HDFS的读写流程 a、客户端发送请求,调用DistributedFileSystem API的open方法发送请求到Namenode,获取...(发布于2020-01-04 10:31:07)

Hadoop技术框架,

Hadoop技术框架, 引用: http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/ 本文只是作者的理解,不断更新!...(发布于2020-01-04 10:31:03)

hadoop笔记本,

hadoop笔记本, Hadoop不错的学习笔记: http://www.cnblogs.com/ggjucheng/archive/2012/04/22/2465625.html...(发布于2020-01-04 10:30:59)

hadoop secondarynamenode,

hadoop secondarynamenode, 原文地址:http://www.blogjava.net/hello-yun/archive/2012/07/27/384132.html   光从字面上来理解,很容易让一些初学者先入为主的认为:SecondaryNameNode(snn)就是NameNode(nn)的热...(发布于2020-01-04 10:30:55)

hadoop学习笔记,

hadoop学习笔记, 1:在服务器通过hadoop fs -ls path来查看路径下的文件 2:还可以使用的命令有tail.get.shell.cp.du.mkdir.mv.put.rm.rmr....(发布于2020-01-04 10:30:51)

hadoop集群搭建(hadoop),

hadoop集群搭建(hadoop), 首先说一下配置环境:三台电脑 192.168.30.149 hadoop149 namenode和jobtracker ###因为149机器稍微好一点192.168.30.150 hadoop150 datanode和TaskTracker192.168.30.148 hadoop150 datanode和Task...(发布于2020-01-04 10:30:47)

Hadoop权限管理,

Hadoop权限管理, 1.介绍 本文介绍的Hadoop权限管理包括以下几个模块: (1) 用户分组管理 。用于按组为单位组织管理,某个用户只能向固定分组中提交作业,只能使用固定分组中配置...(发布于2020-01-04 10:30:43)

HADOOP之HDFS,

HADOOP之HDFS, 摘要: HDFS是Hadoop的核心模块之一,围绕HDFS是什么、HDFS的设计思想和HDFS的体系结构三方面来介绍。 关键词:Hadoop  HDFS   分布式存储系统 HDFS是Hadoop的核心模块之一,HDF...(发布于2020-01-04 10:30:39)

Hadoop HBase,

Hadoop HBase, 一.简要介绍   Hadoop HBase是Apache Hadoop 项目的一部分,基于Hadoop Distributed FileSystem,是一个开源的,基于列存储模型的分布式数据库。HBase的目标是(原文):the hosting of ve...(发布于2020-01-04 10:30:35)

Hadoop安装教程,

Hadoop安装教程, 参考【给力星】的教程,步骤详细,辅以适当说明,相信按照步骤来,都能顺利安装并运行Hadoop: Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0 Hadoop安装教程_单机...(发布于2020-01-04 10:30:29)

hadoop的安装,

hadoop的安装, 一、JDK环境配置与安装      1、查收看dk是否安装  根据此图可以看出、jdk尚未安装 2、安装jdk 利用apt -get install 命令安装jdk  3、在此查看jdk是否安装成功    4、配置j...(发布于2020-01-01 01:48:43)

hadoop的安全模式,

hadoop的安全模式, the ratio of reported blocks 1.0001 has reached the threshold 0.9990. Safe mode will be turned off automatically in 7 seconds. 平常不知道安全模式是啥的情况下,hadoop提供了一些命令:hadoop dfs...(发布于2020-01-01 01:48:39)

Hadoop安装配置,

Hadoop安装配置, 文章来源:http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503949.html 1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系...(发布于2020-01-01 01:48:34)

Hadoop底层原理、Hadoop配置、Hadoop命令 和 Hadoop API 的基本使用、

Hadoop底层原理、Hadoop配置、Hadoop命令 和 Hadoop API 的基本使用、Hadoop案例代码, 大数据组件使用 总文章   ================= Hadoop底层原理 ==================  1.客户端执行hdfs fs put 本地文件系统...(发布于2020-01-01 01:48:30)

Hadoop 1.0 -> Hadoop 2.0(主)-> Hadoop 3.0 发展简要,

Hadoop 1.0 -> Hadoop 2.0(主)-> Hadoop 3.0 发展简要, Hadoop,一般提到它,指的是广义上的:指代大数据的一个生态圈,包括很多其他的软件(如spark/kafka/hive/hbase/zookeeper/等等),是一个 适合...(发布于2020-01-01 01:48:26)

hadoop 2.7.5, hadoop 2.8.2, hadoop 2.9.0 proto 文件大小对比,

hadoop 2.7.5, hadoop 2.8.2, hadoop 2.9.0 proto 文件大小对比, [houzhizhen@localhost hadoop]$ sh proto_ls.sh -rw-r--r--. 1 houzhizhen root 2741 1月   4 16:09 ./hadoop-2.7.5-src/hadoop-hdfs-project/hadoop-hdfs/src/main/proto/acl.pro...(发布于2020-01-01 01:48:22)