dagster:Dagster 是 MLOps 时代专为数据平台构建的数据编排器,旨在帮助用户定义、开发和操作数据资产。它提供强大的编程模型、本地开发体验以及用于生产环境中观察和调试管道的健壮用户界面。;FedML:FedML是由TensorOpera AI支持的统一且可扩展的开源机器学习库,能够在任何地点和任何规模运行AI训练与部署任务。它为机器学习运维、调度和高性能ML库提供了全面的支持,包括联邦学习、分布式训练和生成式AI功能。
构建可靠的数据平台
大型模型(包括大语言模型)的分布式训练与微调