西西河

主题:【原创】如何提高多帧图像的分辨率(上) -- 驿路梨花

共:💬77 🌺150 新:
分页树展主题 · 全看首页 上页
/ 6
下页 末页
        • 家园 瞎掰两句

          我感觉这里的难点还是你说的难写和难看懂的部分,就是如何估计点扩散函数的参数和运动矢量。另外还有因快门速度导致的单幅图像的运动模糊。

          如果多帧图像是连续获得的,也就是说它们对应一定的时间序列,那么用光流场计算应该能得到比较好的运动矢量估计(这个大概是20年前的技术了,另外也有用Kalman滤波器估计运动矢量的)。 但是如果多帧图像是无序的,可能就比较复杂了,大致要用特征点匹配的方法,能做到多大的精度我也说不上来。

          • 家园 关于对运动模型的估计

            偶写的那个算法,相当于解构一下低频图片的组成,看看里面大概有那些东西。主要有两个未知的量,一个是高频分量,一个运动模型。

            这样的话,如果偶们把运动模型估计出来了,那么高频分量不就可以反解出来了么?而运动模型的估计,就是用共轭梯度法来求它的最优解。

            大致就是这个思路吧。

        • 家园 感觉那个亚像素的要求

          似乎是相对超分辨率第图的倍数而言,不是原始的低分辨率图。否则开始图像匹配阶段前,基本都被pass掉了

          • 家园 有时候也是对原始的低分率的图用的

            要看你的定位精度怎么样。

            • 家园 或许只在你们的特殊应用里能满足

              其它很多应用能找到几个像素偏差又满足条件的,往往10来张图已经很不错了,亚像素偏差几乎不可能满足,没那么多图啊。

              算法本身或许不需要这样严格的必要条件,否则应用不可能有那么广的。

              • 家园 额。。。我是说偶们的情况

                你是说先用帧插值提高分辨率,然后再进行图像融合的意思?

                • 家园 我是说超分辨率算法里,原始图要求亚像素偏移不是必要条件
                  • 家园 这个不知道了。。。

                    原来学的好像是需要的。。。

                    原来做实验的时候,对相机进行微位移,最高平移位移不超过0.8个像素,否则就不用了。

                    如果不满足的这个条件的话,求运动模型的时候,好像会出负数吧?要不,只是在边界条件下的有界最佳匹配?

                    乃砸的偶很痛!!!

                    • 家园 反正你的应用里

                      假如有足够多满足条件的图,自然省事些。

                      我前些年看过些这方面的文章,没试验所以不好评论,不过你提到的那个条件一定没见过,否则印象会极深(视频里各帧间仅仅亚像素的偏差是很不易找到——想象一下实际应用的场合,能有多少情况下满足条件又有足够多的帧?)。

                      也不知这类算法最近又发展到什么程度了。

                      某些应用场合广的算法或许计算量很大,假如增加限制条件,可以有更有效的算法替代,但应用场合有一定限制。仅仅猜测,或许出现疑问的原因在此?

                      • 家园 是偶的问题。。。

                        查了一下,我错了。

                        应该是这样:不必须根据像素级来确定微小位移 —— 他的确定是根据图像子区的划分来确定的。

                        比如后图从前图基础上移动,则后图=前图+整像素位移+亚像素微位移。这个亚像素的微位移的确定决定于泰勒展开式中你准备舍弃近似的高阶项。

                        前文说的要求亚像素的算法是一种很老的算法:

                        如果能对目标图像进行理想插值(重建),那么理论上的定位精度应取决于步长的大小。实验表明步长取0.01个像素即可。在理想情况下,这种亚像素定位精度为0.02—0.1个像素

                        于起峰《基于图像的精密测量与运动测量》(科学出版社)


                        本帖一共被 1 帖 引用 (帖内工具实现)
                        • 家园 哦,因为没具体试验

                          所以我也没深入了解,以前倒是下载了些文章,不过很具体的不多。

                          假如哪天万一用到,一定向你请教。

                          • 家园 木有咧。。。偶不是搞这个的

                            偶原来带本科生的毕业论文,做的是有关多帧图像融合的实验。当时做实验,是将相机做亚像素微位移,当时老师说是小于0.8像素的就舍弃。将这些位移统计起来后,代入二维的重建模型中,就可以算出来啦。。。所以,至于运动模型的估计,都有公式代的。

                            后来做卫星图片的处理,偶也不是做图像识别那一块的,是做遥感预处理这一块的。

                    • 家园 可怜阿,你应该让他写个帖子不就得呢
        • 家园 看来只能让GPS或者间谍卫星来干活了。。。

          以后我在室外一定要快速移动,防止被连续扫描到。这样如果只拍到1桢也还原不了,8过告诉相机现在能做到连拍多少,梨花jj是否可以告诉一下,决定我以后做坏事的时候的行动速度。。。

分页树展主题 · 全看首页 上页
/ 6
下页 末页


有趣有益,互惠互利;开阔视野,博采众长。
虚拟的网络,真实的人。天南地北客,相逢皆朋友

Copyright © cchere 西西河