视频拼接

摘要： 目前,通用机场数量飞速增长,远程塔台发展迅猛,多路视频实时拼接技术不断改进。视频拼接算法大部分是改进特征点提取算法、特征点匹配算法和图像融合算法,改进特征点提取算法使得提取特征点更准确,改进图像融合算法使得全景图上各路图像色彩一致并且消除拼接缝,最后使用图形处理器实现加速。基于图像拼接整体计算流程,从数学角度计算原始图像到全景图像像素坐标变换矩阵和像素值变换矩阵。视频拼接时,基于像素坐标变换矩阵和像素值变换矩阵,使用核函数计算原始图像的像素点经过矩阵变换后的坐标和像素值,设置核函数被调用时的线程配置,充分利用图形处理器的并行计算能力,实现图像拼接加速。实验结果表明,拼接8张1080*1920的图像耗时约22 ms。视频拼接的核心技术包括拉流、解码、拼接、编码传输,文章结尾对其中的拉流和解码技术给出了建议。

摘要： 基于智能矿山矿用卡车和电铲实现无人驾驶、辅助设备平地机和推土机实现远程操控、矿坑排水实现远程监控、实现煤炭连续开采业务的大带宽、广覆盖、低时延网络需求,研究了5G高、中、低3个频段混合组网方案,并在西湾煤矿进行了实际应用。结果表明:低频能够很好实现露天矿采坑全覆盖,满足无人驾驶控制类业务需求;高频能够实现大带宽,满足电铲远程操控多摄像头视频拼接业务;中频能够兼顾各项目基本的视频和控制类业务需求。

摘要： 针对现有实时视频通信系统因视频编解码模块和传输协议之间协作不紧密影响视频通信的传输性能和视觉质量,以及常用的远程实时监控系统监控范围和角度有限,多画面独立显示不够直观的问题,采用新型紧耦合式的视频通信架构,通过逐帧联合控制视频的编解码和传输,优化了每一帧的编码长度,提高了实时监控视频传输的端到端时延性能和视频图像质量;设计了多路远程视频源间的帧同步算法,并基于OpenCV的图像拼接模块定制了图像拼接流程;通过在特征点提取和匹配、图像变形和图像融合阶段使用GPU加速,并在逐帧拼接时设置合适的拼接缝更新间隔,实现了监控视频的近实时拼接.实验证明,系统能够获得良好的监控视频质量和更广的监控范围,一定程度上解决了视频监控中的盲区问题,同时具有较好的实时性和视觉效果.

摘要： 针对目前视频拼接系统实时性不高、拼接效果不理想、成本高等问题,对传统的ORB算法进行了改进,并采用软硬件协同设计的方法,在Zynq平台上实现了一款视频实时拼接系统.该系统利用Zynq的PS搭建嵌入式Linux系统,进行用户界面开发,实现任务调度;利用Vivado HLS工具将改进的视频拼接算法进行硬件加速并部署到Zynq的PL中.实验结果表明,该视频拼接系统拼接后的图像清晰度高、无拼接缝隙,而且基于Zynq和改进ORB算法的视频拼接方案使视频拼接速度获得到了很大的提升,满足实时性的要求.

摘要： 针对因传输线缆长度、外部电磁干扰等因素导致的视频在传输过程中出现抖动,进而引起全景视频拼接系统中某一区域出现拼接错位现象,采用了基于FPGA的软件防抖动设计,在FPGA内部添加乒乓缓存机制,逐帧检测接收到的视频帧的完整性,对抖动情况下视频帧有效像素丢失或超出分别进行处理,在不增加硬件成本的前提下解决视频抖动引起的全景视频拼接显示错位问题.通过现场跑车试验,证明在车速不超过80 km/h情况下视频拼接输出无抖动现象.

摘要： 在动态场景下进行视差处理是实时视频拼接中的一个难题,当运动对象经过视频拼接接缝时容易发生伪影和错位的现象,而复杂的配准和融合算法又难以满足实时性要求。为了解决这个问题,提出了一种基于时序特征预测的实时视频拼接算法。针对采集到的具有20%-40%重叠区域的视频帧,通过结合HOG和LBP等快速特征匹配算法,保证了视频拼接的速率。利用视频帧的时序上下文特性,识别出运动物体并估计物体运动矢量,判断物体能否到达接缝,选择性更新接缝,避免运动物体穿越接缝时产生畸变,达到了去伪影的效果。实验结果表明,所述算法视频拼接速率达到44FPS,且在去伪影效果上有很大的提升。

摘要： 在动态场景下进行视差处理是实时视频拼接中的一个难题,当运动对象经过视频拼接接缝时容易发生伪影和错位的现象,而复杂的配准和融合算法又难以满足实时性要求.为了解决这个问题,提出了一种基于时序特征预测的实时视频拼接算法.针对采集到的具有20％～40％重叠区域的视频帧,通过结合HOG和LBP等快速特征匹配算法,保证了视频拼接的速率.利用视频帧的时序上下文特性,识别出运动物体并估计物体运动矢量,判断物体能否到达接缝,选择性更新接缝,避免运动物体穿越接缝时产生畸变,达到了去伪影的效果.实验结果表明,所述算法视频拼接速率达到44FPS,且在去伪影效果上有很大的提升.

摘要： 针对多路视频融合阶段拼缝线两侧范围内出现的虚影、色彩亮度差异以及高分辨率下无法实时拼接等问题,本文提出一种多方向感知的视频融合算法.首先,在图像配准阶段,采用SIFT提取特征点与特征描述子对图像进行配准;然后,在图像融合阶段,使用指数函数构建的权值查找表指导融合过渡,结合视频帧投影位置与拼接缝之间的距离,利用形态学操作自适应地融合图像拼缝;最后,利用GPU平台大量多线程并行运算,整合投影与融合等矩阵运算从而掩盖延时达到实时目的.实验结果表明,该算法能消除重叠区域内出现的虚影、模糊现象,并且具有良好的实时拼接效果.

摘要： 城市轨道交通车站行人交通行为特征数据对于站内行人安全管理,以及疏导设施安全设计具有重要参考价值.针对城市轨道交通车站人流密集条件下行人交通行为数据采集速度慢、结果精度差的问题,设计一套基于视频数据挖掘的城市轨道交通车站行人交通行为特征提取系统.运用Hadoop架构,通过对采集到的连续相邻俯拍视频进行存储及拼接、提取二维平面中行人交通行为基础数据、判别行人交通行为类别,实现行人各交通行为特征参数的提取并运用分布式存储技术对其存储,最后通过实验数据验证系统的有效性.

摘要： 为了提升煤矿智能化开采水平,采煤生产活动中的视频信息开始被利用起来。根据国内实际煤矿开采视频信息应用现状,总结了视频信息的来源和实际应用中存在的困难,举例说明了除监控视频以外的光学成像设备。从视频图像的获得和处理角度,分析了井下监控视频传输、拼接等技术,比较了视频图像增强等预处理技术。从视频信息的具体应用角度,比较了井下人员检测的技术手段并介绍其他应用案例,如仪器定位定姿和火灾预警等。

摘要： 随着鱼眼相机逐渐成为全景视频的主要采集设备,面向鱼眼图像的高效全景拼接技术也得到越来越多的关注.为了解决镜头间亮度差异造成的拼接视频质量下降的问题,本文提出了一种基于非均匀采样直方图的亮度补偿算法.该算法根据全景图像在不同纬度空间采样率变化的特点对相邻图像的重叠区域进行非均匀采样,构成统计直方图,通过直方图匹配实现图像间的亮度补偿.此外,考虑到图像亮度分布对拼接图像质量的影响,本文根据重叠区域图像亮度直方图提出了一种新的自适应基准图像选择方法,基于该方法得到的基准图像可以有效提高全景视频的质量.该方法充分考虑了鱼眼镜头的畸变特性,不要求拼接的图像之间精确配准,能够适应不同的光照条件.实验表明,本文提出的算法在保证全景视频质量的同时,有效地降低了亮度补偿的复杂度,从而可以应用于基于鱼眼镜头的全景实时视频拼接系统.

摘要： 本发明公开了一种视频图像的拼接方法、拼接装置以及采用该拼接装置的视频监视系统。该拼接方法包括：获取第一图像和第二图像；识别出第一图像、第二图像的重叠部分，该重叠部分分别称为第一子图像、第二子图像；计算第一子图像的色差分量的平均值、第二子图像的色差分量的平均值；计算第一子图像的色差分量平均值与第二子图像的色差分量的平均值的差异值；使用所述差异值调整所述第二图像的色差分量；对所述第一图像、第二图像进行拼接处理。优选地，计算所述第一子图像的色差分量的平均值时排除所述第一像素，计算所述第二子图像的色差分量的平均值时排除所述第二像素。本发明能有效地改善或消除了视频图像拼接后的色差。

摘要： 本发明公开了一种无人机视频实时快速正射拼接系统及其拼接方法，所述系统包括关键帧选取模块、特征点提取模块、特征点匹配模块、图优化校正模块。所述关键帧选取模块用于从实时视频数据中选取拼接处理的关键帧图像；所述特征点提取模块用于从关键帧图像中提取与相邻关键帧图像有对应关系的特征点；所述特征点匹配模块通过特征点匹配计算相邻关键帧的相机相对位置和姿态数据；所述图优化校正模块利用特征点匹配结果调整每个关键帧的相机位置和姿态数据对应图优化中的节点，优化校正每个关键帧的相机位置和姿态数据。本发明利用无人机视频的POS信息、图像特征信息等多种数据的优势和图优化技术，实现高精度、高速度的无人机视频实时快速正射拼接。

摘要： 本发明涉及一种拼接屏与视频端口的绑定方法、装置、计算机设备、存储介质和拼接屏显示系统，该方法包括：控制视频端口分别输出带有端口编号的图像数据至拼接屏的显示单元。接收图像扫描装置对拼接屏进行扫描得到的拼接屏图像，根据各显示单元的显示边界对拼接屏图像进行子屏分割，得到对应显示单元的子图像和空间位置信息。对分割后的子图像进行识别得到各显示单元对应视频端口的端口编号，将各显示单元的空间位置信息与对应视频端口的端口编号进行绑定存储。通过输出带有端口编号的图像数据至显示单元，对各显示单元的空间位置信息与对应视频端口进行绑定，以作为视频端口输出视频图像的参考依据，提高了拼接屏与视频端口的绑定操作便利性。

摘要： 本发明提供一种基于图像拼接的视频拼接装置及视频拼接方法，基于图像拼接的视频拼接方法包括获取待拼接的第一路视频和第二路视频；分别提取第一路视频、第二路视频的n帧图像中每一帧图像所对应的特征点；依次根据第一路视频的第i帧图像的特征点和第二路视频的第i帧图像的特征点对第一路视频的第i帧图像和第二路视频的第i帧图像进行拼接，以获得拼接后的视频；对拼接后的视频进行显示。本发明提出的基于图像拼接的视频拼接方法将两路视频的特征提取并行执行，从而提高了拼接效率与拼接稳定性。

摘要： 本发明涉及一种全景视频拼接系统，包括设置在摄像区域内的全景摄像机，全景摄像机包括多个相互连接的子相机，还包括用于实时从全景摄像机上获取初始全景视频图像的视频获取模块、用于对子相机的视频图像进行移动处理的移动模块、用于对全景视频图像进行拼接处理的图像拼接处理模块；本发明还涉及一种全景视频拼接方法；本发明通过本拼接系统直接对相邻的两个视频图像进行移动拼接融合，调节控制相邻的视频图像边界的重叠区域，对该重叠区域进行平滑融合处理，解决了若干个视频图像拼接成全景视频图像时视频显示的实时性差和稳定性不好的问题，并减少了摄像环境多变、需通过图像拼接算法进行拼接融合的复杂性等原因引起的视频拼接融合所需时间。

摘要： 本发明提供一种基于图像拼接的视频拼接装置及视频拼接方法，基于图像拼接的视频拼接方法包括获取待拼接的第一路视频和第二路视频；分别提取第一路视频、第二路视频的n帧图像中每一帧图像所对应的特征点；依次根据第一路视频的第i帧图像的特征点和第二路视频的第i帧图像的特征点对第一路视频的第i帧图像和第二路视频的第i帧图像进行拼接，以获得拼接后的视频；对拼接后的视频进行显示。本发明提出的基于图像拼接的视频拼接方法将两路视频的特征提取并行执行，从而提高了拼接效率与拼接稳定性。

摘要： 本发明实施例公开了一种视频拼接处理器、显示系统及视频拼接处理方法。包括主控板、输入板和输出板；输入板与输出板连接；输入板用于将接收到的图像进行分割；输出板用于将分割完成的图像进行处理后发送至拼接显示屏；主控板包括第一可编程逻辑器，第一可编程逻辑器用于产生同源脉冲信号；输出板包括第二可编程逻辑器，第二可编程逻辑器与第一可编程逻辑器连接；第二可编程逻辑器用于根据同源脉冲信号产生图像处理脉冲信号；输入板包括第三可编程逻辑器，第三可编程逻辑器与第一可编程逻辑器连接；第三可编程逻辑器用于根据同源脉冲信号产生图像分割脉冲信号。本发明实施例提供的技术方案，方案简单，成本低。

摘要： 本发明实施例公开了多视频源拼接处理方法及装置和视频拼接器。所述多视频源拼接处理方法包括：将多个待拼接视频源分别以预设输入位宽缓存至多个第一缓存区域；以预设输出位宽将分别缓存至所述多个第一缓存区域的所述多个待拼接视频源分别转存至第一缓存子区；将所述数据存储长度满足所述指定长度的所述待拼接视源源切换至以所述预设输出位宽缓存至多个第二缓存子区中相对应的第二缓存子区；以及根据记录至所述第三缓存区域的所述存储器写请求，控制已转存至相对应的所述第一缓存子区的所述待拼接视频源存储至目标存储器的指定区域。本发明实施例有效解决现有的多视频源拼接处理方法会导致可编程逻辑器件的BRAM资源消耗较大且浪费较多的问题。

摘要： 本发明公开了多路4K准实时拼接视频的全景拼接算法，涉及一种全景拼接算法，属于实时视频拼接技术领域；通过多个采集终端进行视频图像的获取；通过数据解码模块将获取的视频图像进行视频帧的数据解码，并通过帧图像预处理模块对解码后的帧图像进行预处理；将处理后的帧图像数据发送至中央处理器进行帧图像配准，帧图像配准具体包括特征点检测、特征点描述以及特征点匹配；配准后的图像数据发送至图形处理器，在图形处理器得到配准后的图像数据后通过像素缓冲区对加速图像进行渲染与显示；中央处理器将处理第N帧配准后的数据传递给图像处理器后，捕获第N+1帧图像解码数据，并在中央处理器处理，同时，在图像处理器进行第N帧图像融合。

摘要： 本发明提供一种基于手动规划拼接缝算法的视频拼接方法，在视频拼接前期图像配准后，获取重叠区域；在拼接前，在提取的重叠区域预先标记出拼接缝的走向；在重叠区域上按照拼接缝的走向依次选取4个点，根据选取的4点顺序，依次将其连接起来构成一条弯曲的折线，使得这条弯曲的折线能够避开敏感区域；把上述手动选取的拼接缝引入到非敏感区域，再进行图像融合，从而把基于最佳缝合线的图像融合带来的不好拼接效果引入到非敏感区域，从而使得最终的视频拼接有很好的视觉效果。