大数据采集与管理方案

1、关系型数据库、ftp、kv库redis、mongodb等；

2、调度平台apache dolphinscheduler

3、采集插件datx插件、sqoop插件、spark等

4、数据管理，统称为“资源管理”。数据治理、数据脱敏、数据加密与解密、数据共享、数据申请、申请审批

5、资源分类。

6、资源加工：资源聚合与统计分析。