请教一个机器学习PAI的问题将data pipeline分离到其它机器的方案呢？就是datacc吗？
有没有将data pipeline分离到其它机器的方案呢？就是datacc吗？
写回答
-
公众号：网络技术联盟站，InfoQ签约作者，阿里云社区签约作者，华为云 云享专家，BOSS直聘 创作王者，腾讯课堂创作领航员，博客+论坛：https://www.wljslmz.cn，工程师导航：https://www.wljslmz.com2000元阿里云代金券免费领取，2核4G云服务器仅799元/3年，新老用户都有优惠，立即抢购>>>
在阿里云机器学习PAI中，如果您需要将data pipeline分离到其他机器上，则可以考虑使用数据集成服务DataWorks（原名DataWorks）。DataWorks是阿里云提供的一种数据集成、数据开发、数据管理和数据应用的服务，支持广泛的数据源和数据类型，包括结构化和半结构化数据，以及大数据和机器学习等应用场景。
您可以将数据集成和处理流程定义为一个数据工程，并在DataWorks中执行该数据工程。DataWorks支持分布式计算和分布式存储，可以轻松扩展处理能力和存储容量，而且支持自定义插件和算子，方便灵活的数据集成和开发。另外，DataWorks还提供了可视化的运维监控和数据管理功能，方便您进行数据质量管理和数据安全管理。
另外，如果您需要使用DataCC来管理Paas的发布和部署，也是可以的。DataCC是一款阿里云的Paas管理平台，提供了完整的自动化发布和部署流程，包括代码构建、自动化测试、发布和回滚等功能。您可以将PAI模型使用的模型代码和模型数据保存在DataWorks中，然后使用DataCC将模型和代码一并打包发布和部署到云服务器或者其他环境中。
2023-04-30 10:30:31赞同 展开评论 打赏 -
2000元阿里云代金券免费领取，2核4G云服务器仅799元/3年，新老用户都有优惠，立即抢购>>>
和你描述的类似，加速样本的读取。dataacc是pai上的服务化产品，如果感兴趣欢迎去pai上试用此回答整理自钉群DeepRec用户群
2023-04-17 21:39:03赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
