Cube Studio

整体架构

cube是tme开源的一站式云原生机器学习平台，目前主要包含

• 1、数据管理：特征平台，支持在/离线特征；数据源管理，支持结构数据和媒体标注数据管理；
• 2、在线开发：在线的vscode/jupyter代码开发；在线镜像调试，支持免dockerfile，增量构建；
• 3、训练编排：任务流编排，在线拖拉拽；开放的模板市场，支持tf/pytorch/mxnet/spark/ray/horovod/kaldi/volcano等分布式计算/训练任务；task的单节点debug，分布式任务的批量优先级调度，聚合日志；任务运行资源监控，报警；定时调度，支持补录，忽略，重试，依赖，并发限制，定时任务算力的智能修正；
• 4、超参搜索：nni，katib，ray的超参搜索；
• 5、推理服务：tf/pytorch/onnx模型的推理服务，serverless流量管控，triton gpu推理加速，依据gpu利用率/qps等指标的hpa能力，虚拟化gpu，虚拟显存等服务化能力；
• 6、资源统筹：多集群多项目组资源统筹，联邦调度，边缘计算；

帮助文档

https://github.com/tencentmusic/cube-studio/wiki

开源共建

学习、部署、体验、开源建设 欢迎来撩。或添加微信luanpeng1234，备注<开源建设>， 共建指南

平台部署

参考wiki

平台完成部署之后如下:

体验环境

http://159.75.208.175/

贡献

算法(视觉)：@jaffe-fly

算法(文本)：@HHJ

算法(搜广推)： @HHJ

算法(语音)：@ma-chengcheng

算法(传统机器学习)：@chendile

开发： @xiaoyangmai @VincentWei2021 @SeibertronSS

运营： @cyxnzb @gilearn

合作公司

@腾讯@腾讯音乐@马上金融@电信研究院@移动研究院@汇丰银行@长亭科技@东方天安@福建博思@平安科技@创维@oppo@美柚@T3出行