00. 调研计划总览
2019-12-12 本文已影响0人
GradientDescent
- 集群管理:Slurm [2019.12.14 done]
- 并行计算框架:MPI
- mpi 可以用slurm调度,也可以用Torque调度,yarn也可以,等等
- 参考书:都志辉《高性能计算并行编程技术---MPI并行程序设计》
- 调研 case:
- mpi_adfea
- CTRQ 预估
- 广告触发
- 机器学习框架:PaddlePaddle
- 模型指标 auc, copc
- 训练速度
- 对离散大模型的支持
- 在线预测predictor
- 模型导出
- 双塔embedding导出
- ANN检索
- annoy
- hnsw