- 集群管理:Slurm [2019.12.14 done]
- 并行计算框架:MPI
- mpi 可以用slurm调度,也可以用Torque调度,yarn也可以,等等
- 参考书:都志辉《高性能计算并行编程技术---MPI并行程序设计》
- 调研 case:
- mpi_adfea
- CTRQ 预估
- 广告触发
- 机器学习框架:PaddlePaddle
- 模型指标 auc, copc
- 训练速度
- 对离散大模型的支持
- 在线预测predictor
- 模型导出
- 双塔embedding导出
- ANN检索
- annoy
- hnsw
00. 调研计划总览
最后编辑于 :
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
推荐阅读更多精彩内容
- 作者木环 来源:InfoQ 本月初,Kubernetes在其官网上宣布了百度的PaddlePaddle成为目前唯一...