Hadoop 2.9.0core-default.xml配置属性集

在配置Hadoop高可用集群时，核心配置文件core-site.xml至关重要。

在 core-site.xml 中配置 Hadoop 的核心属性，如 Namenode 和 ResourceManager 地址。 在 hdfs-site.xml 中配置 HDFS 的属性，如 NameNode 容量和副本数量。 在 yarn-site.xml 中配置 YARN 的属性，如 Resource Manager 内存和队列配置。 在 mapred-site.xml 中配置 MapReduce 的属性，如作业历史记录存储位置和作业超时设置。

hadoop-eclipse-plugin-2.9.0 套装挺好用的，适合在 Hadoop 2.9.0 版本上使用。主要包含插件包hadoop-eclipse-plugin-2.5.1.jar、hadoop.ddl和winutils.exe，这几样都经过亲测，可以在 64 位和 32 位环境下顺利运行。值得注意的是，2.5.1插件包能否顺利运行，主要取决于你用的Eclipse版本。我的环境是Eclipse Mars.2 (4.5.2)，用得蛮顺手的。你要是正在做 Hadoop 相关的工作，可以试试看这个套件哦！如果你对集成这些工具有兴趣，也可以参考一下以下链接：Hadoop DLL、Winut

Hadoop 的错误信息挺常见的，比如你在用 Nutch 时，碰到的错误是： Exception in thread "main" java.io.IOException: Failed to set permissions of path。这其实是因为权限设置失败，路径权限没有正确设置为0700，所以导致了无法执行。办法也是比较直接的，检查一下tmp路径下的权限设置，确保 Hadoop 的相关目录有正确的权限就好了。 如果你正好在用eclipse，也可以参考一下 Hadoop 的 Eclipse 插件，这样能让你更方便地调试和 Hadoop 相关问题，效率也蛮高的哦。 另外，如果你碰到的具体

hadoop.dll 的 2.9.0 版本，蛮适合想在 Windows 上折腾 Hadoop 的你。配置起来不算太麻烦，关键是有资源直接能下，省去自己编译的麻烦。不过要注意，有些站点下载要积分，最少 2 分，量力而行吧。

属性闭包的求解代码写得蛮清晰的，适合刚上手数据库理论的你看看。结构分得挺明白，InPut函数负责录入函数依赖，GetClosure搞定核心闭包逻辑，DeDup还能去重，起来比较稳。重点是：代码思路通俗，配合注释就能看明白。如果你对规范化、查询优化这些感兴趣，这段代码算是个不错的切入点。哦对了，别忘了闭包计算的时候多测几组属性集，会有不少发现！

Hadoop是Apache基金会开发的分布式系统基础架构。用户无需了解分布式底层细节，即可开发分布式程序，利用集群进行高速运算和存储。Hadoop实现了分布式文件系统（Hadoop Distributed File System, HDFS）。HDFS具备高容错性，设计用于低成本硬件，提供高吞吐量数据访问，适用于大数据集的应用程序。HDFS放宽了POSIX要求，支持以流的形式访问文件系统中的数据。Hadoop框架的核心设计是HDFS和MapReduce，HDFS提供数据存储，MapReduce提供数据计算。

Windows 上跑 Hadoop 开发环境，hadoop-common-2.9.0-win-resource.rar 这个资源挺实用的。你要是试过 MapReduce 在 Win 上调试卡半天的那种痛感，就知道少了hadoop.dll和winutils.exe真的啥也干不了。这个包里都帮你准备好了，对应的是Hadoop 2.9.0版本，配置完环境变量就能用，响应也快，实测过的哦。 文件结构也清晰，照着系统版本选文件夹，把hadoop.dll扔到System32下、winutils.exe放进%HADOOP_HOME%\bin里，再设置下Path变量，重启一下就能跑起来。用的时候注意版本别弄错

由于hadoop1.2.1和eclipse在Windows环境下运行时存在文件权限问题，导致原始的hadoop-core-1.2.1.jar不可用。经过对fileutil.java文件的修改，现已编译成功并亲测可用。