SHC

SHC Core 是 Spark 与 HBase 连接的重要桥梁。它通过优化的批量读取和写入、灵活的数据映射，以及增强的查询性能，极大提升了大数据的效率。适合用在物联网、金融风控、电商推荐等领域。SHC Core 通过 Spark 的分布式计算能力，支持对海量数据进行快速，还能根据数据分布智能优化查询路径，避免过多的网络传输。使用时，注意调整分区策略，确保兼容性，适时配置安全性和监控机制。，它是一个实用的工具，你轻松搞定大数据任务。

shc 的自定义编译包shc-core-spark-2.3.0-hbase-2.1.0.jar，挺适合在CDH 6.2.0上折腾PySpark 2.4.0和HBase 2.1.0的朋友。直接拿来就能读写 HBase，免去了你自己编 JAR 包的麻烦，还是挺省事的。 用的是Hortonworks SHC的源码，兼容性不错，跑在 CDH 环境下也挺稳，尤其你要跟 HBase 做深度集成的场景，挺好使的。比如你想用 DataFrame 的方式查 HBase 表，直接搞定，写入也方便。 有一点要注意哈，Spark 版本别弄错了，这个包是配 Spark 2.3.x 的，虽然你跑 PySpark 2.4.