Hadoop2.8.3编译及工具包

分享 Hadoop 2.8.3 编译成果，包含编译好的 Hadoop 2.8.3、详细编译教程、JDK、完整 Maven 仓库、编译所需安装包以及编译过程中的注意事项，助力您顺利完成 Hadoop 2.8.3 编译。

SQLCipher是一个开源的数据库加密库，它为SQLite提供透明的数据加密功能，特别适用于移动应用开发保护用户信息。详细介绍如何编译SQLCipher工具包，包括Perl、OpenSSL源码、SQLCipher源码以及Mingw-32/64工具链的配置和编译步骤。

该工具包提供了 Windows 平台下使用 Hadoop 3.1.0 所需的 winutils.exe 等工具，替换 Hadoop bin 目录中的资源包并将相关 dll 文件添加到 system32 目录后即可使用。

Hadoop 开发工具包包含必要的 Java 类库，可直接导入 Eclipse 等开发环境，简化 Hadoop 相关开发。

Windows 平台必备 Hadoop 工具包，测试可用。欢迎关注获取更多推送。

Hadoop-2.8.1winutils.rar，挺适合 Windows 用户的一个资源包。要知道，Hadoop 最初是为 Linux 环境设计的，所以在 Windows 上跑它时，得做一些额外的配置。这个压缩包就是用来这个问题的。它包括了在 Windows 上运行 Hadoop 所需的工具，像是winutils.exe和一些dll文件，你只需要把它们复制到 Hadoop 的安装目录下，按照步骤配置好环境变量，Hadoop 就能在你的 Windows 系统上顺利启动了。 不过，得注意的是，这个配置过程会有点挑战性。毕竟，Windows 和 Linux 差别还是蛮大的，配置过程中你会遇到一些兼容

Windows 下跑 Hadoop 的程序，经常会因为找不到winutils.exe卡住，是刚接触的同学，一脸问号。hadoop-3.1.0-winUtils.rar就是专门为这种情况准备的。只要你把它解压出来，设个HADOOP_HOME环境变量，路径指到它的目录，立马搞定。 Hadoop 写文件到HDFS，尤其在 Windows 上，经常会报could not locate executable null\bin\winutils.exe这种错，看着就烦。其实就是缺了个执行文件而已，没啥大不了的。 这个包里包括了你要的winutils.exe和hadoop.dll，版本对应Hadoop 3.

这是orc-tools-1.7.0-SNAPSHOT-uber.jar，专为ORC设计的Java工具包，详细使用说明可在官方文档https://orc.apache.org/docs/java-tools.html找到。工具支持meta、data、scan、convert、json-schema等命令。

hadoop 源码的编译其实没那么玄乎，但环境得整利索，尤其是几个关键依赖包。像是用来做数据序列化的protobuf，Hadoop 必须得用 2.5.0 版本的，不然分分钟编译挂掉。你得先把protoc加到PATH里，不然 Maven 都认不出它来。压缩那块用的是snappy，就是那种压得快、解得也快的库，HDFS 和 MapReduce 性能会好不少。你要是编译的时候找不到它的.so或者.a文件，那十有八九就是没装好路径。再来一个比较容易被忽略的——FindBugs，这玩意儿不是编译必须，但有它能帮你提早发现 Bug，适合团队协作的场景，稳定性更有保障。JDK 1.7和Maven这些就不多说