武汉多谱多勒科技有限公司

本发明属于图像处理与集成电路设计技术领域，具体涉及一种基于五波段AI视觉芯片的图像处理系统及方法。本发明包括五路传感器接口、五波段同步ISP流水线、AI自动参数调校模块、可配置多波段融合引擎、NPU推理引擎和输出接口；采用了单芯片五波段集成架构，体积小，功耗低，能够满足弹载、机载等对SWaP³有严苛要求的应用；设计了可配置多波段融合引擎，支持从五路图像中任意选择两路进行融合，依据AI场景分类结果动态调整融合权重与策略，提升了系统在复杂多变环境下的适应性与成像质量；构建了AI驱动的闭环自适应系统，引入AI自动参数调校模块，反馈优化各波段ISP的参数及融合参数，摆脱了人工调参的依赖。

本发明涉及一种单芯片时空同步的HDR域双波段图像自适应融合装置及方法，该融合方法包括：将入射光分离为可见光与红外光，分别对可见光和红外光进行处理后得到红外宽动态图像和可见光宽动态图像；将红外宽动态图像和可见光宽动态图像分别进行多尺度分解得到红外低频图像、红外高频图像、可见光低频图像和可见光高频图像；计算红外宽动态图像和可见光宽动态图像的信息量综合评分，基于信息量综合评分的大小确定不同的融合模式，基于对应的融合模式对多尺度分解模块输出的图像进行融合得到HDR域融合图像，基于单芯片双通道ISP同步架构、HDR域高低频分解、指数调制融合与信息量自适应策略进行双波段图像融合，实现细节还原度大幅提升的无损融合。