第三章 大数据平台的架构体系

2019-04-18  本文已影响0人  etheon

大数据基础设施

1.虚拟化
服务器虚拟化,存储虚拟化,网络虚拟化,桌面虚拟化
2.云计算
私有云,社区云,公共云,混合云
IaaS,PaaS,SaaS
3.数据中心


数据采集

1.系统日志采集
chukwa,Flume,Kafka,Scribe
2.网络数据采集:非结构化数据
爬虫
3.其他数据采集


数据存储

SQL,NOSQL,NewSQL
1.结构化数据存储
2.非结构化数据存储


数据处理

数据挖掘,深度学习,社交计算,计算广告。
1.离线批处理
MapReduce
2.实时交互计算
Spark
3.流计算
Storm


数据交互展示

1.数据可视化基础
2.数据可视化模式
科学可视化,信息可视化
3.数据可视化工具
D3,ECharts,Tableau


大数据应用


运营管理


安全管理

上一篇 下一篇

猜你喜欢

热点阅读