辨 析 数 仓 、大数 据、数 据中台的实质 本 人 断 断 续 续 从 事 数 据 仓 库 约 有 五 六 年 经 验 ， 在 移 动 公 司 前 三 年 是 负 责 数据 仓 库 项 目 实 施 ， 后 四 年 开 发 搞 大 数 据 平 台 ， 见 证 了 从 传 统 数 据 仓 库 转 型 到 大数 据 平 台 的 全 历 程 ，见 证 了 大 数 据 平 台 从0 到 1 的 全 部 过 程 ，包 括 第 一 个MPP数 据 集 市 、第 一 个 Hadoop 集 群项 目 、第 一 个 流式数 据 处理项 目 ， 第 一 个 完整的 大 数 据 平 台 的 融合和构建， 混搭式大 数 据 平 台 的 融合构建， 大 数 据 平 台 的 迁移 等等， 我所经 历 的 大 数 据 平 台 从 规模说大 不大 说小不小， 每天处理数 据 量将近 20T（实 时处理月 10T 左右）， 总集 群约 300 台 （其中 Hadoop 节点约 200台 ）， 总容量约 8P， 实 际使用容量约 5P；包 括 了 从 数 据 仓 库 到 大 数 据 平 台 数据 模型 的 重构， 数 据 模型 的 拓展；也包 括 了 大 数 据 平 台 提供各种对内应用的 规划， 和向外提供大 数 据 应用。因此对数 据 仓 库 和大 数 据 平 台 的 优缺点、各自存在 的 问题 、疑 惑 、发 展方 向， 也算 有 一 定 的 认 知 ， 包 括 对新 生 的 数 据 中台 的 发展方 向， 结 合自己 过 往 的 经 验 ， 谈 谈 自己 的 一 些 想 法 。 1 什么是数 据中台？ 说实 在 的 ， 互 联 网 是 制 造 新 名 词 的 地 方 ， 现 在 各种新 名 词 层 出 不穷 ， 顶 层的 有 数 字 城 市 、智 慧 地 球 、智 慧 城 市 、城 市 大 脑 ；企 业 层 面 的 有 数 字 化 转 型 、互 联 网 经 济 ， 数 字 经 济 、数 字 平 台 ；平 台 层 面 的 有 物 联 网 ， 云 计 算 ， 大 数 据 ，5G， 人 工 智 能 ， 机 器 智 能 ， 深 度 学 习 ， 知 识 图 谱 ；技 术 层 面 的 有 数 据 仓 库 、数据 集 市 、大 数 据 平 台 、数 据 湖 、数 据 中台 、业 务 中台 、技 术 中台 等等， 总之 是你 方 唱 罢 他...
VIP
