欢迎投稿

今日深度:

《Hadoop权威指南》之hadoop的架构,

《Hadoop权威指南》之hadoop的架构, 废话不多说直接看图 一、hadoop的架构     1从物理架构来看一个叫Master的机器管理者3台叫slaveX的节点     2从逻辑的角度来看         a:HDFS 一个...(发布于2019-11-23 21:45:19)

[Hadoop]Hadoop本地调试,

[Hadoop]Hadoop本地调试, 1. Maven依赖 dependency groupId org.apache.hadoop / groupId artifactId hadoop-client / artifactId version 2.7.2 / version / dependency dependency groupId junit / groupId artifactId junit / artifactId version...(发布于2019-11-23 21:45:15)

Hadoop技术内幕-Hadoop文件系统,

Hadoop技术内幕-Hadoop文件系统, 第5章 Hadoop 文件系统 1.文件及文件系统 文件的本质是存储在设备上的线性字节流 文件系统用于文件的管理包括文件的结构以及命名、存取、使用、保护和...(发布于2019-11-23 21:45:11)

【大数据-Hadoop】Hadoop架构,

【大数据-Hadoop】Hadoop架构, Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算...(发布于2019-11-23 21:45:07)

【Hadoop】安装Apache Hadoop,

【Hadoop】安装Apache Hadoop, 一、环境介绍 本篇博客介绍手工安装Apache Hadoop的过程,建立VMware上建立三台Linux虚拟机,每台硬盘20G,内存1G。 1. 环境版本 操作系统:CentOS 6.7Java版本:jd...(发布于2019-11-23 21:45:04)

【Hadoop】搭建完全分布式的hadoop,

【Hadoop】搭建完全分布式的hadoop, http://www.cnblogs.com/laov/p/3421479.html hadoop学习之hadoop完全分布式集群安装 http://blog.csdn.net/ab198604/article/details/8250461...(发布于2019-11-23 21:45:00)

《Hadoop基础教程》之初识Hadoop,

《Hadoop基础教程》之初识Hadoop, 转自:http://blessht.iteye.com/blog/2095675 《Hadoop基础教程》之初识Hadoop 博客分类:  读后感          Hadoop一直是我想学习的技术,正巧最近项目组要做电子...(发布于2019-11-23 21:44:55)

《Hadoop基础教程》之初识Hadoop,

《Hadoop基础教程》之初识Hadoop, 《Hadoop基础教程》之初识Hadoop 博客分类:  读后感          Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最...(发布于2019-11-22 21:45:05)

【hadoop】hadoop栏目序,

【hadoop】hadoop栏目序,     实践是检验真理的唯一标准。                                                           --胡福明     目的     本栏目的主要...(发布于2019-11-22 21:45:01)

【Hadoop】Hadoop MR异常处理,

【Hadoop】Hadoop MR异常处理, 1、代码示例 package com.ares.hadoop.mr.flowsort;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.apache.hadoop.fs.Path;impor...(发布于2019-11-22 21:44:58)

Hadoop第一天---初识Hadoop,

Hadoop第一天---初识Hadoop, Hadoop能解决的问题: 1.海量数据需要及时分析和处理。 2.海量数据需要深入分析和挖掘。 3.数据需要长期保存。 问题: 1.磁盘IO成为一种瓶颈,而不是CPU资源。...(发布于2019-11-22 21:44:54)

《Hadoop基础教程》之初识Hadoop,

《Hadoop基础教程》之初识Hadoop, Hadoop历史         雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜...(发布于2019-11-22 21:44:50)

hadoop前传-Hadoop工作原理,

hadoop前传-Hadoop工作原理, 通过一个项目了解hadoop的工作原理,可以在使用hadoop时更加得心应手 下图是简易流程图和各个部位的功能和职责 项目代码和资料在我的资源中可以下载-----...(发布于2019-11-22 21:44:46)

Hadoop入门 之 Hadoop的安装,

Hadoop入门 之 Hadoop的安装, 1.安装Hadoop的三大步骤 答:1.Linux环境,2.JDK环境,3.配置Hadoop。 2.安装Linux 答:利用阿里云,腾讯云等公有云。选择Ubuntu进行安装,然后利用小putty进行操作。...(发布于2019-11-22 21:44:42)

Hadoop入门 之 Hadoop常识,

Hadoop入门 之 Hadoop常识, 1.Hadoop是什么? 答:Hadoop是开源的分布式存储和分布式计算平台。 2.Hadoop的组成是什么? 答:Hadoop由HDFS和MapReduce这两个核心部分组成。        HDFS(Hadoop Di...(发布于2019-11-22 21:44:38)

【hadoop】hadoop学习笔记-shell命令,

【hadoop】hadoop学习笔记-shell命令, 参考自官方文档 http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs args 的形式。 所有的的FS shell命令使用...(发布于2019-11-22 21:44:34)

Hadoop学习笔记-Hadoop初识,

Hadoop学习笔记-Hadoop初识, 序言: 其实Hadoop本人早就想进行一下系统的了解,一直被自己的懒惰给无限的推迟。最终还是鼓起勇气将自己放入到其中。本人了解的Hadoop的所有内容均来自...(发布于2019-11-22 21:44:27)

Hadoop第一天---初识Hadoop,

Hadoop第一天---初识Hadoop, Hadoop能解决的问题: 1.海量数据需要及时分析和处理。 2.海量数据需要深入分析和挖掘。 3.数据需要长期保存。 问题: 1.磁盘IO成为一种瓶颈,而不是CPU资源。...(发布于2019-11-21 21:46:06)

【Hadoop】图解Hadoop架构,

【Hadoop】图解Hadoop架构, 这是针对目前测试环境中Hadoop集群架构的一个简单的总结,下图用图来简单表现: 关于HBase与ZooKeeper,可以分三点来描述: 一、Zookeeper集群的职责 1、负责监控整...(发布于2019-11-21 21:46:02)

《Hadoop基础教程》之初识Hadoop,

《Hadoop基础教程》之初识Hadoop, Hadoop历史         雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜...(发布于2019-11-21 21:45:58)