B2B 项目里用得比较多的数据脚本合集,B2B 全流程.zip
挺全的,适合做 ETL 或者数据仓库建模的朋友看看。文件名就直观:load_b2b__dm_data.job
、load_b2b__dwd_data.job
、load_b2b__dws_data.job
,一眼就知道是按 DM、DWD、DWS 三层来的。你如果平时搞过 Hive,肯定不陌生。
里面的hive_mysql.job
和Oracle_hive.sh
也挺实用,基本能满足大部分数据库之间的数据搬运需求——不论是 MySQL、Oracle 还是 Hive,脚本一跑就完事儿。配套的.sh
脚本也写得比较干净,适合直接拿来改。
还有些 SQL 脚本文件,比如load_b2b__dm_data.sql
,主要是建表、导数据的语句。你直接拿到数据库里跑一下就知道套路了。整个包看下来,思路挺清晰,适合做 B2B 数据或者数据仓库项目的同学借鉴。
哦对了,如果你对 Hive 感兴趣,可以顺手看看数据仓库工具 Hive这篇文章,讲得还蛮接地气的。
如果你正好在做跨数据库的数据集成,或者想跑通一个完整的 B2B 数据链路,这个压缩包,值得收藏。