[Hadoop] 源码编译Hadoop 2.7.2,
[Hadoop] 源码编译Hadoop 2.7.2, 1. 基础环境 ubuntu 14.04 desktop amd64 2. 安装JDK 【 https://yunpan.cn/c6IF2W9m6zcX6(提取码:5b73)】 tar zxvf jdk-7u45-linux-x64.tar.gz -C /opt/ export JAVA_HOME=/opt/jdk1.7.0_45 expo...(发布于2019-11-19 21:45:21)
[Hadoop] Eclipse 远程调试 Hadoop,
[Hadoop] Eclipse 远程调试 Hadoop, 1. 服务端开启调试并启动服务,本文以调试ResourceManager为例 export YARN_RESOURCEMANAGER_OPTS="-agentlib:jdwp=transport=dt_socket,server=y,suspend=y,address=8000" start-all.sh 注...(发布于2019-11-19 21:45:17)
《Hadoop基础教程》之初识Hadoop,
《Hadoop基础教程》之初识Hadoop, Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去...(发布于2019-11-19 21:45:13)
《hadoop基础教程》之初始hadoop,
《hadoop基础教程》之初始hadoop, Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不...(发布于2019-11-19 21:45:09)
【Hadoop 学习】之 安装配置Hadoop,
【Hadoop 学习】之 安装配置Hadoop, 前言:开始学习Hadoop喽 []~( ̄▽ ̄)~* 预备工作: 专创个用户为hadoop(当然也可以不用) #这条命令创建了可以登陆的 hadoop 用户,并使用 /bin/bash 作为...(发布于2019-11-19 21:45:05)
【hadoop】hadoop学习笔记-回收站,
【hadoop】hadoop学习笔记-回收站, Hadoop回收站trash,默认是关闭的。 习惯了window的同学,建议最好还是把它提前开开,否则误操作的时候,就欲哭无泪了 1. 修改conf/core-site.xml 增加 prop...(发布于2019-11-19 21:45:01)
[Hadoop]Hadoop添加节点datanode,
[Hadoop]Hadoop添加节点datanode, 部署hadoop 和普通的datanode一样。安装jdk,ssh 修改host 和普通的datanode一样。添加namenode的ip 修改namenode的配置文件conf/slaves 添加新增节点的ip或host 在新节点的...(发布于2019-11-19 21:44:56)
Hadoop学习笔记之Hadoop基本介绍,
Hadoop学习笔记之Hadoop基本介绍, Hadoop简介 分布式存储系统HDFS (Hadoop Distributed File System ) 分布式存储系统 提供了 高可靠性、高扩展性和高吞吐率的数据存储服务 分布式计算框架Map...(发布于2019-11-18 22:02:28)
[Hadoop]Hadoop添加节点datanode,
[Hadoop]Hadoop添加节点datanode, 部署hadoop 和普通的datanode一样。安装jdk,ssh 修改host 和普通的datanode一样。添加namenode的ip 修改namenode的配置文件conf/slaves 添加新增节点的ip或host 在新节点的...(发布于2019-11-18 22:02:24)
《Hadoop基础教程》之初识Hadoop,
《Hadoop基础教程》之初识Hadoop, Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多...(发布于2019-11-18 22:02:20)
《Hadoop基础教程》之初识Hadoop,
《Hadoop基础教程》之初识Hadoop, 原文地址http://blessht.iteye.com/blog/2095675 Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的...(发布于2019-11-18 22:02:16)
Hadoop(一):大数据 与 Hadoop,
Hadoop(一):大数据 与 Hadoop, 大数据背景 大数据特征:海量数据规模、多样数据类型、快速数据流转(实时性)- 数据价值 大数据流程:数据采集-数据存储-数据处理/分析/挖掘...(发布于2019-11-18 22:02:13)
【Hadoop】Hadoop RPC框架线程模型,
【Hadoop】Hadoop RPC框架线程模型, 1、线程模型 2、参考资料: 源码级强力分析hadoop的RPC机制:http://weixiaolu.iteye.com/blog/1504898 Hadoop RPC框架:http://blog.csdn.net/thomas0yang/article/details/41211259...(发布于2019-11-18 22:02:09)
[hadoop] hadoop命令小结,
[hadoop] hadoop命令小结, hadoop fs -mkdir /tmp/input 在HDFS上新建文件夹hadoop fs -put input1.txt /tmp/input 把本地文件input1.txt传到HDFS的/tmp/input目录下hadoop fs -get input1.txt /tmp/input/input1.txt 把HDFS文件拉...(发布于2019-11-18 22:02:05)
《Hadoop基础教程》之初识Hadoop,
《Hadoop基础教程》之初识Hadoop, Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不...(发布于2019-11-18 22:02:01)
hadoop 第一课 下载安装hadoop,
hadoop 第一课 下载安装hadoop, 学习hadoop,第一课,先安装吧。 按照书上说明,先到http://hadoop.apache.org/下载最新的release版本,我这里使用的是hadoop-1.1.2.tar 解压压缩安装目录:/home/...(发布于2019-11-18 22:01:57)
(大数据之hadoop)hadoop远程调试,
(大数据之hadoop)hadoop远程调试, JPDA 简介 Sun Microsystem 的 Java Platform Debugger Architecture (JPDA) 技术是一个多层架构,使您能够在各种环境中轻松调试 Java 应用程序。JPDA 由两个接口(分别是...(发布于2019-11-18 22:01:54)
《Hadoop基础教程》之初识Hadoop,
《Hadoop基础教程》之初识Hadoop, Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不...(发布于2019-11-17 21:46:57)
hadoop学习之hadoop指令,
hadoop学习之hadoop指令, 查看相关命令的使用方法 hadoop fs -help rm 显示目录下文件 hadoop fs -ls /user/yang/input 递归查看 hadoop fs -lsr /user/yang/input 创建目录 hadoop fs -mkdir -p /user/yang/input多重目录...(发布于2019-11-17 21:46:53)
【hadoop】hadoop环境快速搭建,
【hadoop】hadoop环境快速搭建, Hadoop的下载地址: http://www.apache.org/dyn/closer.cgi/hadoop/core/ 版本:hadoop0.17.1 JDK的安装: 要求必须安装jdk1.5.07以上的版本。 分步式环境的搭建: 1、硬件环境...(发布于2019-11-17 21:46:49)