周复盘（9.16-9.23）
2018-09-21 本文已影响12人
timingkiss
周复盘（9.16-9.23）
来BigData一周
还会有些许不适应
偶然之间听到梦里梦外都是你
还会想起过往泪流满面
这一周过得很充实
快速学习了数据治理通貌
正常大SE的走法应是
开发----mde---pl----se
直接上来se能理解模块和架构
在业务流程上也能大致理解
本质上DG是建模
从物理存储模型到逻辑模型
本质是对数据表、表字段的定义
类似开发态的API Builder
BDI则更像BPM
从DG取逻辑模型
or直接访问底层数据库
做数据的抽取转换映射
最后写到底层HDFS
用HDFS、Spark、Streaming做分析
如果没有Hadoop的生态
universe只能称作应用软件
连CRM都不能算
但是有了Hadoop
能对海量数据做分析处理
比过往ETL要强大很多
不只是生成报表
怎么闭环分析应用
再进阶到AI人工智能
是这个领域生长的方向
所以不要把自己陷到只会统计分析报表的境地
还是要不忘初心
志存高远
给伙伴们说现在的小孩
毕业一年就比我们这些工作十年的强很多
每个人桌上都放了一大叠新书都是技术
读书的速度超快
搬家收出来两捆书
都是管理相关的
是许久没有深度学习了
上半年玩的程序都是小打小闹
离真正的商用软件差距很大
喜欢高I的伙伴们
见面第一句就是小太阳
那个小太阳的我
在经历暗夜之后
还要一个周期才能升起
磨砺
成长
独立
