分配零值,或者一旦該差分圖像的像素等于或高于 該預(yù)定閾值,就對像素掩模的對應(yīng)像素分配"一"值。閾值一般通過試驗來確定,并且例如 可能被設(shè)置為最大視頻值的20 %。
[0069] 例示:
[0070] 關(guān)于通過8比特RGB進行了編碼的視頻,每個像素分量(R、G和B)具有0和255 之間的值,閾值可能等于255的20%,即51。
[0071] 將當(dāng)前像素位置處的補償圖像的像素的分量命名為(R1.,G1.,B 1.),并且將當(dāng)前像 素位置處的圖像2的像素的分量命名為(R2, G2, B2),當(dāng)前像素位置處的掩模的像素:
[0072] -如果I R1, -R21彡51和/或IG1, -G21彡51和/或IB1, -B21彡51,則將具有值1 ;
[0073] -否則,將具有值0。
[0074] 可選地,可以額外地對掩模應(yīng)用某種形態(tài)濾波,以便減少噪聲。
[0075] 步驟3-實施例2 :基于通過圖3例示的所確定的運動矢量的圖,如下地建立該第 二圖像的像素掩模:對于第二圖像的每個像素,比較其運動矢量與位于該像素的鄰域中的 相鄰像素的運動矢量,并且一旦其運動矢量和相鄰像素的運動矢量之間的差異低于預(yù)定閾 值,就對像素掩模的對應(yīng)像素分配零值,或者一旦所述差異等于或高于所述預(yù)定閾值,就對 像素掩模的對應(yīng)像素分配"一"值。
[0076] 例示:
[0077] 在運動估計模塊的輸出處提供運動矢量的圖。一個運動矢量與圖像的每個像素相 關(guān)聯(lián),運動矢量的圖的大小與圖像1或圖像2的大小相同。
[0078] 掩模的計算:對于運動矢量圖的每個運動矢量,計算到鄰域矢量的平均距離(mean distance)。鄰域包含位于包圍所考慮的運動矢量的(η X η)窗口中的運動矢量。例如,η =5〇
[0079] 如果c表示在當(dāng)前像素位置處的運動矢量的位置,如果X表示包圍在該當(dāng)前像素 位置c處的運動矢量的運動矢量的位置,如果V。是在當(dāng)前像素位置c處的運動矢量,如果 Vx。和V y。分別是該運動矢量V。的水平分量和垂直分量,如果V υ是V。的鄰域中的運動矢量 (其中,0〈i彡η并且0〈j彡η),如果Vxi,」和V yi,」分別是該運動矢量V u的水平分量和垂直 分量,則根據(jù)如下公式計算運動矢量V。和它的所有近鄰V u之間的平均距離:
[0080] 對于i = 1到η以及j = 1到n,
【主權(quán)項】
1. 一種建立視頻序列中的前面圖像(1)的后面的圖像(2)的像素掩模的方法,包含以 下步驟: -建立與從所述前面的圖像(1)向所述后面的圖像(2)的運動相對應(yīng)的運動矢量的 圖; -通過將所述運動矢量的圖應(yīng)用于所述前面的圖像(1),產(chǎn)生關(guān)于所述后面的圖像(2) 的對所述前面的圖像(1)進行運動補償?shù)难a償圖像(1');以及 -根據(jù)所述補償圖像(r)和所述前面的圖像(1)之間的逐像素的差異,建立所述后面 的圖像(2)的像素掩模。
2. -種建立視頻序列中的前面的圖像(1)的后面的圖像(2)的像素掩模的方法,包含 以下步驟: -建立與從所述前面的圖像(1)向所述后面的圖像(2)的運動相對應(yīng)的運動矢量的圖; 以及 _基于與所述前面的圖像的每個像素相對應(yīng)的運動矢量和與位于所述像素的鄰域中的 相鄰像素相對應(yīng)的運動矢量之間的差異,建立所述后面的圖像(2)的像素掩模。
3. 根據(jù)權(quán)利要求1或2所述的建立像素掩模的方法,還包含以下步驟:對于每個像素, 比較所述差異與預(yù)定閾值,并且一旦所述差異低于所述預(yù)定閾值,就對所述像素掩模的對 應(yīng)像素分配"零"值,或者一旦所述差異等于或高于所述預(yù)定閾值,就對所述像素掩模的對 應(yīng)像素分配"一"值。
4. 一種將視頻序列的圖像的色彩采樣為對應(yīng)的掩蔽圖像的色彩的方法,包含連續(xù)地針 對該序列的前面的圖像(1)的后面的每個圖像(2)的以下步驟: _根據(jù)權(quán)利要求1至3中的任一項建立所述后面的圖像⑵的像素掩模;以及 _將所述像素掩模應(yīng)用于對應(yīng)的后面的圖像(2),以便獲得對所述后面的圖像(2)的像 素進行采樣的對應(yīng)的掩蔽圖像。
5. -種對視頻序列的圖像的色彩進行聚類的方法,其中,在聚類之前,根據(jù)如權(quán)利要求 4所述的方法對要聚類的色彩進行采樣。
6. 根據(jù)權(quán)利要求5所述的方法,包含:對視頻序列的第一圖像的色彩進行聚類,以便產(chǎn) 生色彩集群的集合并且使所述色彩分布在所產(chǎn)生的集合的色彩集群中的第一步驟;以及, 每次獲得掩蔽圖像時,對已經(jīng)與所述掩蔽圖像的色彩一起被聚類的色彩進行聚類,以便更 新色彩集群的集合并且使所述色彩分布在所更新的集合的色彩集群中的步驟。
7. -種用于建立視頻序列中的前面的圖像(1)的后面的圖像(2)的像素掩模的像素掩 模建立器,包含: _運動矢量圖建立器,被配置為建立與從所述前面的圖像(1)向所述后面的圖像(2)的 運動相對應(yīng)的運動矢量的圖;以及 -圖像產(chǎn)生器,被配置為通過應(yīng)用由所述運動矢量圖建立器所建立的運動矢量的圖,產(chǎn) 生關(guān)于所述后面的圖像(2)的對所述前面的圖像(1)進行運動補償?shù)难a償圖像(1'), 其中,所述像素掩模建立器被配置為根據(jù)所述補償圖像(r)和所述前面的圖像(1)之 間的逐像素的差異,建立所述后面的圖像(2)的像素掩模。
8. -種用于建立視頻序列中的前面的圖像(1)的后面的圖像(2)的像素掩模的像素圖 建立器,包含:運動矢量圖建立器,被配置為建立與從所述前面的圖像(1)向所述后面的圖 像(2)的運動相對應(yīng)的運動矢量的圖,并且被配置為根據(jù)與所述前面的圖像的每個像素相 對應(yīng)的運動矢量和與位于所述像素的鄰域中的相鄰像素相對應(yīng)的運動矢量之間的差異,建 立所述后面的圖像(2)的像素掩模。
9. 一種用于將視頻序列的圖像的色彩采樣為對應(yīng)的掩蔽圖像的色彩的色彩采樣器,包 含: _像素圖建立器,用于連續(xù)地針對該序列的前面的圖像(1)的后面的每個圖像(2),根 據(jù)如權(quán)利要求8至9中的任一項來建立像素掩模;以及 -掩蔽圖像建立器,被配置為將由所述像素圖建立器所建立的像素掩模應(yīng)用于所述后 面的圖像(2),以便獲得對所述后面的圖像(2)的像素進行采樣的對應(yīng)的掩蔽圖像。
10. -種用于對視頻序列的圖像的色彩進行聚類的色彩聚類設(shè)備,包含: _根據(jù)權(quán)利要求9所述的色彩采樣器,用于將視頻序列的圖像的色彩采樣為對應(yīng)掩蔽 圖像的色彩; -色彩集群產(chǎn)生器,被配置為根據(jù)由色彩采樣器所提供的掩蔽圖像產(chǎn)生色彩集群的集 合;以及 -色彩分布器,被配置為使掩蔽圖像的色彩分布成由色彩集群產(chǎn)生器所產(chǎn)生的色彩集 群。
【專利摘要】方法包含以下步驟:對于在前面的圖像(1)的后面的每個圖像(2)連續(xù)地,-基于與從所述前面的圖像(1)向所述后面的圖像(2)的運動相對應(yīng)的運動矢量的圖,建立所述后面的圖像(2)的像素掩模,-將所述像素掩模應(yīng)用于對應(yīng)的后面的圖像(2),以便獲得對所述后面的圖像(2)的像素進行采樣的對應(yīng)的掩蔽圖像。將該方法應(yīng)用于色彩聚類允許利用有限的計算機資源迭代地更新色彩集群。
【IPC分類】H04N19-553, G06T7-00
【公開號】CN104584556
【申請?zhí)枴緾N201380043232
【發(fā)明人】C.波里, J.克韋克, E.喬利
【申請人】湯姆遜許可公司
【公開日】2015年4月29日
【申請日】2013年8月7日
【公告號】EP2698764A1, EP2885913A2, US20150248767, WO2014026895A2, WO2014026895A3