검색으로 돌아가기
기록
异构混合训练的跨芯片协同调度方法和装置
발명알 수 없음
7조회수
13청구항 · 5 독립항
§ Ⅰ
개요
IPC 분류
G06F 9/48 (2006.01)G06F 9/50 (2006.01)G06F 9/455 (2018.01)G06N 3/098 (2023.01)
本发明提供一种异构混合训练的跨芯片协同调度方法和装置,涉及计算机技术领域。其中,异构混合训练的跨芯片协同调度方法包括:接收异构混合训练任务的启动请求;根据各角色的描述信息,创建各角色的副本规格;将各角色对应的副本规格组装为分布式训练任务对象;指示容器编排平台基于分布式训练任务对象创建各角色对应的容器组,并调用批处理调度引擎对各角色对应的容器组执行组调度策略,以将所有角色对应的容器组均调度到目标异构算力集群的节点;在目标异构算力集群启动异构混合训练任务。本发明可以在异构算力环境下高效、可靠地实现大规模模型的混合并行训练。