Hadoop Bin

64 位 Windows 7 操作系统安装 Hadoop 2.4.1 版本所需的 bin 目录。

在本地安装 Hadoop 时，请将此目录替换为原来的 bin 目录。

hadoop官方文件是没有编译的，直接使用会提示缺少hadoop.dll,该资源是编译后产生的bin文件，替换Hadoop2.74原始bin文件即可。

Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是——Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。 Spark是一种与Hadoop相似的开源集群计算环境，但是两者之间还存在一些不同之处，这些有用的不同之处使Spark在某些工作负载方面表现

解压后，将 bin 文件夹中的 16 个文件复制到 Hadoop 安装目录下的 bin 文件夹中，覆盖已有的文件。

Spark 2.4.0 安装包：免 Hadoop 版本 该资源为 Apache Spark 的独立安装包，版本号为 2.4.0，不包含 Hadoop 组件。适用于已配置 Hadoop 环境或无需 Hadoop 功能的用户进行 Spark 的部署和使用。 Spark 简介 Apache Spark 是一种用于大数据处理的通用引擎，其核心是分布式内存抽象，能够高效地处理批处理、流处理、机器学习和交互式查询等任务。

spark-2.2.2-bin-hadoop2.7.tgz 为 Apache Spark 2.2.2 版本的安装包， 您可以访问 Apache Spark 官方网站获取该版本的源码包：http://archive.apache.org/dist/spark-2.2.2/

适用于 Linux 系统的 Apache Spark 3.1.3 版本安装包，文件名：spark-3.1.3-bin-hadoop3.2.tgz。

hadoop-common-2.2.0-bin-master文件包含了Windows端开发Hadoop和Spark所需的winutils.exe。在Windows下使用IDEA开发Hadoop和Spark程序时可能会遇到异常，主要原因是操作系统为Windows，涉及Hadoop相关操作如写入HDFS文件。解决方法是将该文件解压至任意目录，并配置环境变量中的系统变量为HADOOP_HOME。

该工具包官方渠道获取不便，特此分享分卷，此部分为卷2。