Hadoop Mac 本地库

提供Hadoop编译64位本地库的方法

将 winutils.exe、hadoop.dll 文件复制至 C:WindowsSystem32 目录即可进行本地调试。

本地调试 Hadoop 经常绕不过一个坑：Windows 上跑不起来？其实就是缺个关键的winutils.exe。压缩包里的hadoop-common-bin-master是从 Hadoop 源码编出来的，结构清爽，适合你拿来直接做本地测试。还有winutils.exe，就是让 Hadoop 在 Windows 上跑通的关键工具，没有它，别说起服务了，命令都执行不了。要跑通这些，先装好 JDK，把HADOOP_HOME环境变量指到你解压的目录里，记得再把bin目录加到PATH里。搞定后在命令行里敲个hadoop version，能出来版本信息就环境基本 OK 了。对了，压缩包里有个解压密码.d

Windows 下折腾 Hadoop 的朋友，对hadoop.dll和winutils.exe肯定不陌生。这俩东西就是你想在本地跑起来 Hadoop 时的“钥匙”，缺一不可。是winutils.exe，用来绕过系统权限检查，没它各种 HDFS 命令直接报错。 hadoop.dll的作用也挺关键，是支持 Hadoop 在 Windows 环境下运行的动态链接库，尤其在调用底层 API 时起作用。你一开始不会注意到它，直到遇到一些稀奇古怪的错误，才发现原来是它的问题。 我自己是在搞 HDFS 调试时踩了不少坑。后来在这篇文章里看到怎么用winutils.exe和hadoop.dll配 Window

hadoop-2.6.0 的 64 位 native 库，配置起来其实挺。你只要先把hadoop-2.6.0/lib/native整个删掉，把native-x64.zip解压，改个名字mv native-x64/ native就能用了。省事又稳定，适合在 64 位 Linux 下搞大数据，直接绕开了那个老是报错的 native-hadoop 动态库问题。

针对Mac系统下Hadoop 3.0.0安装后可能出现的原生库加载问题，本指南提供Hadoop 3.0.2原生库的编译方法，解决Hadoop在Mac环境下的兼容性问题，确保其功能完整性。

为解决 Windows 系统下 Hadoop 命令执行依赖问题，需将 Hadoop 安装目录 bin 文件夹下的 hadoop.dll 文件复制到 C:WindowsSystem32 目录。

提供 Apache Ant、Maven、Findbugs、Protobuf 和 Hadoop 源码的 64 位本地库资源包。

此包含Hadoop 2.7.3的本地接口库，其中包括Snappy 1.1.3版本。解压后直接放置于$HADOOP_HOME/lib/native目录即可使用。注意，其中不含Bzip2库。