Windows 10 编译 hadoop详细步骤.docx

Windows10下 Hadoop一、下载相关软件包JDK 1.8Hadoop2.7.3 可使用JDK1.8或1.7Hadoop2.6.5用JDK1.7，1.8报错Maven 3.3.9下载地址：/download.cgiFindbugs 1.3.9?下载地址：/projects/findbugs/files/findbugs/1.3.9/ProtocolBuffer 2.5.0（两个文件protobuf-2.5.0.zip?、protoc-2.5.0-win32.zip?）下载地址：/google/protobuf/releases/tag/v2.5.0Cmake 3.7.1（cmake-3.7.1-win64-x64.zip）下载地址：/download/Visual Studio 2015 Professional? Update 3Zlib? headers下载地址：/project/libpng/zlib/1.2.8/zlib128.zipGnuWin32?（Git-2.11.0-64-bit）下载地址：?https://git-for-windows.github.io/Ant 1.9.8下载地址：?/bindownload.cgi二、软件安装?1、安装Visual Studio2、Git 安装验证安装成功方法：?输入Linux命令? ls? 即可列出当前文件夹列表3、CMake 安装直接安装运行cmake-3.7.1-win64-x64.msi，采用默认配置即可4、配置环境变量配置JAVA_HOME配置Maven解压Maven到指定目录（D:\ apache-maven-3.3.9）?新建系统变量M2_HOME=D:\apache-maven-3.3.9?编辑系统变量Path，新建%M2_HOME%\binFindbugs?解压Findbugs到D:\findbugs-1.3.9?编辑系统变量Path，新建D:\findbugs-1.3.9\binProtocolBuffer?解压ProtocolBuffer到D:\protobuf-2.5.0\?解压protoc-2.5.0-win32.zip，将protoc.exe复制到D:\protobuf-2.5.0\src目录下安装ProtocolBuffer，打开命令行cd D:\protobuf-2.5.0\javamvn test mvn install将protoc.exe所在路径D:\protobuf-2.5.0\src，添加到系统变量Pathprotoc–version验证是否安装成功Zlib?解压Zlib到D:\zlib-1.2.8?新建环境变量ZLIB_HOME=D:\zlib-1.2.8Ant解压Ant到D: \apache-ant-1.9.8新建环境变量ANT_HOME=D: \apache-ant-1.9.8Path中加入%ANT_HOME%\bin三、编译准备?1、下载Hadoop源码并解压2、用VisualStudio 2015 分别打开，升级项目信息到2015E:\hadoop\hadoop-*-src\hadoop-common-project\hadoop-common\src\main\native\native.slnE:\hadoop\hadoop-*-src\hadoop-common-project\hadoop-common\src\main\winutils\winutils.sln3、E:\hadoop\hadoop-*-src\hadoop-hdfs-project\hadoop-hdfs\pom.xml将其中所有Visual Studio 10替换成Visual Studio 144、开始编译第一步、用管理员身份打开“VS2015 开发人员命令提示”第二步、命令行里面执行批处理vcvarsx86_amd64.bat切换进入D:\Program Files\Microsoft Visual Studio 14.0\VC\bin\x86_amd64目录执行vcvarsx86_amd64.bat，如下图：第三步、编译Hadoop切换进入Hadoop源码目录执行命令mvn package -Pdist,native-win -DskipTests–Dtar等待编译，出现如下提示，代表编译成功（maven有些包下不下来，可考虑搞个VPN）编译完成后的包在如下目录中注，hadoop2.6.5编译时会报一个错需修改一个类文件E:\hadoop\hadoop-2.6.5-src\hadoop-common-project\hadoop-annotations\src\main\java\org\apache\hadoop\classi