← 返回列表
提高高速彩色视频空间分辨率的压缩时间成像系统及方法
摘要文本
本发明提供一种提高高速彩色视频空间分辨率的压缩时间成像系统及方法，该压缩时间成像系统在原有的编码孔径压缩时间成像装置的基础上增加灰度相机，在对运动场景图像编码后，采用灰度相机和彩色相机进行双路成像采集编码压缩图像，随后将两路采集的灰度观测图与彩色观测图利用优化的基于互注意力机制的视频重建模型进行视频重建，得到高空间分辨率的彩色视频图像，本方案可以综合灰度相机重建细节好和彩色相机颜色丰富的优点，利用灰度与彩色的成对观测图，实现高质量的彩色压缩感知的视频重建。
申请人信息
- 申请人:西湖大学
- 申请人地址:310024 浙江省杭州市西湖区转塘街道石龙山街18号
- 发明人: 西湖大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 提高高速彩色视频空间分辨率的压缩时间成像系统及方法 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311569550.0 |
| 申请日 | 2023/11/22 |
| 公告号 | CN117615229A |
| 公开日 | 2024/2/27 |
| IPC主分类号 | H04N23/13 |
| 权利人 | 西湖大学 |
| 发明人 | 刘星; 张逸飞; 吴华铮; 曹淼; 袁鑫 |
| 地址 | 浙江省杭州市西湖区转塘街道石龙山街18号 |
专利主权项内容
1.一种提高高速彩色视频空间分辨率的压缩时间成像方法，其特征在于，包括以下步骤：获取压缩时间成像装置对应于运动场景拍摄的多组观测图像对，每一观测图像对包括同时曝光采集的灰度观测图和彩色观测图，其中所述压缩时间成像装置包括依次序排列设置的采集镜头组件、空间光调制器、第二成像镜头以及独立设置在第二成像镜头的成像面的彩色相机和灰度相机，运动场景画面被采集镜头组件采集后经过空间光调制器被编码得到二值编码图像，二值编码图像通过第二成像镜头成像在灰度相机上获取灰度观测图，二值编码图像通过第二成像镜头成像在彩色相机上获取彩色观测图；将每一观测图像对输入到预训练得到的视频重建模型中重建得到重建的运动场景视频，其中所述视频重建模型包括并行的用于处理灰度观测图的结构分支以及用于处理彩色观测图的色彩分支，结构分支同从色彩分支之间通过交叉注意力模块将色彩分支的特征引入结构分支中。。来源：马 克 团 队