博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
CentOS6.7-64bit编译hadoop2.6.4
阅读量:6246 次
发布时间:2019-06-22

本文共 1740 字,大约阅读时间需要 5 分钟。

 

1.下载maven(apache-maven-3.3.3-bin.tar.gz)http://archive.apache.org/dist/maven/maven-3/3.3.3/binaries/apache-maven-3.3.3-bin.tar.gz2.安装maventar -zxvf apache-maven-3.3.3-bin.tar.gz -C /usr/local3.添加环境变量vim /etc/profileexport JAVA_HOME=/usr/local/jdk1.7.0_45export MAVEN_HOME=/usr/local/apache-maven-3.3.3export PATH=$PATH:$JAVA_HOME/bin:$MAVEN_HOME/bin4.加载环境变量source /etc/profliemvn -version5.下载protobuf(https://code.google.com/p/protobuf/downloads/list 或 https://protobuf.googlecode.com/files/protobuf-2.5.0.tar.gz)6.安装protobuf编译依赖,为了编译安装protoc,需要使用YUM下载几个依赖的工具yum install -y gcc gcc-c++ make7.解压安装protobuftar -zxvf  protobuf-2.5.0.tar.gz -C /usr/local/srccd /usr/local/src/protobuf-2.5.0  ./configure --prefix=/usr/local/protobuf make && make install8将protobuf添加到环境变量vim /etc/profileexport PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$MAVEN_HOME/bin:/usr/local/protobuf/binsource /etc/profileprotoc --version9.安装其他编译依赖yum install -y cmake openssl-devel ncurses-devel zlib-develyum install -y snappy snappy-devel bzip2 bzip2-devel lzo lzo-devel lzop openssl openssl-devel10.编译hadoop(进入文件夹里面,里面有一个文件BUILDINT.txt,打开即可看见里面关于编译hadoop的一些环境要求)tar -zxvf hadoop-2.6.4-src.tar.gz -C /usr/local/src/cd /usr/local/src/hadoop-2.6.4-srcmvn package -Pdist,native -DskipTests -Dtar  12.查看编译好的安装包cd /usr/local/src/hadoop-2.6.4-src/hadoop-dist/target#出现问题INFO util.NativeCodeLoader - Unable to load native-hadoop library for your platform... using builtin-java classes where applicable在/etc/profile中添加export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native"#查看可用的本地库hadoop checknative -acat /proc/cpuinfo | grep "physical id" | sort | uniq | wc –lcat /proc/cpuinfo | grep "core id" | sort -u | wc -lcat /proc/cpuinfo | grep MHz | uniq

 

转载地址:http://onria.baihongyu.com/

你可能感兴趣的文章
Spring Boot中初始化资源的几种方式
查看>>
通过测试发现的Exchange 2013 CU16存在的一个小bug
查看>>
将桌面文件映射至E盘
查看>>
走红日本 阿里云如何能够赢得海外荣耀
查看>>
入侵CIA和FBI的黑客:可能是一个15岁少年
查看>>
聚焦服务器行业,看美国独立服务器优势
查看>>
高中生开发 Chrome 插件,帮助色盲患者更为清晰的看到网上图片
查看>>
玩笑到现实,大数据涉足文学研究--用数据模型分析莎翁著作
查看>>
[Servlet&JSP] HttpServletResponse的使用
查看>>
【java设计模式】之 单例(Singleton)模式
查看>>
Linux_自制系统服务启动脚本
查看>>
干货:解码OneData,传说中的阿里数据中台是如何练成的?
查看>>
gorename: easy refactoring tool for Golang[转]
查看>>
数据库进程间通信解决方案
查看>>
Guice框架-DI(依赖注入之作用域)
查看>>
海量数据计算应该如何选择数据库
查看>>
CodeCounter
查看>>
MongoDB 如何保证 oplog 顺序?
查看>>
TF-IDF与余弦相似性的应用(一):自动提取关键词
查看>>
冒泡排序、插入排序、选择排序、快速排序、二分查找(Objective-C实现)
查看>>