知行教育项目介绍

编程入门行业动态更新时间:2024-10-25 16:17:38

知行教育<a href=https://www.elefans.com/category/jswz/34/1771421.html style= 项目介绍"/>

知行教育项目介绍

文章目录

- 项目一：大数据数仓项目
- - 项目描述：
  - 核心指标有两个：访问客户量和咨询客户量
  - 整体流程：
  - 增量方案优缺点：

项目一：大数据数仓项目

项目名称：知行教育数仓项目

项目架构：

数据源：电咨、线下面授、在线教育等OLTP系统的数据，大多存储于mysql。
数据抽取：使用sqoop实现关系型数据库和大数据集群的双向同步。数据存储：HDFS
数据清洗：数据的清洗、转换、统计分析等都是使用基于CM管理的Hive来进行的。
数据分析：数据的清洗、转换、统计分析等都是使用基于CM管理的Hive来进行的。
数据同步：使用sqoop实现关系型数据库和大数据集群的双向同步。 OLAP数据服务：采用常用的Mysql数据库。

更多推荐

知行教育项目介绍

本文发布于:2024-03-09 14:54:48，感谢您对本站的认可！

本文链接:https://www.elefans.com/category/jswz/34/1725295.html