面向资源优化的大数据调度方法、装置、设备及存储介质

本发明属于大数据处理与资源管理技术领域，公开了面向资源优化的大数据调度方法、装置、设备及存储介质。该方法包括：基于通过预设接口从现有数据处理体系同步离线生产任务的元数据并根据任务优先级、预计执行时长和任务依赖关系，采用混合调度算法对任务队列进行排序与资源分配，生成任务调度顺序与资源分配方案，然后启动并执行任务，同时在执行过程中实时监控任务执行状态与资源使用情况，并动态调整任务执行顺序，以实现生产数据与调度信息的双向同步，无需额外设计外部数据采集组件，完全依托半导体企业现有数据处理体系已采集的离线生产数据，实现资源的高效合理分配，显著提升调度效率与系统整体性能。