Hadoop 配置

常用配置参数待整理,待扩展配置 NameNode 时,为了使其能进行垃圾回收,需要在 hadoop-env.sh 中加入: export HADOOP_NAMENODE_OPTS="-XX:+UseParallelGC ${HADOOP_NAMENODE_OPTS}" HADOOP_LOG_DIR - 守护进程日志文件的存放目录HADOOP_HEAPSIZE - 最大可用堆

- 阅读全文 -

hadoop 安装

准备系统:linux/ubuntujava jdk 1.5 +sshrsynchadoop 稳定发行版开始安装安装 java 配置 JAVA_HOME手动下载 java 安装包, tar 命令解压,配置好 JAVA_HOME安装 ssh 和 rsyncsudo apt-get install ssh rsync解压 hadoopssh 无密码访问ssh localhost

- 阅读全文 -