CVPR 2020 最佳論文提名 | 神經(jīng)網(wǎng)絡(luò)能否識別鏡像翻轉(zhuǎn)
經(jīng)過圖像處理后,每個循環(huán)群
將變化為
:
命題3里,我們假設(shè)T和J具備交換律,那么我們可以將上面的公式改寫,并得到
:
原分布D不具備視覺手性意味著:每個循環(huán)群
中的元素都有相同的概率出現(xiàn)。因此,由于經(jīng)過J圖像處理后循環(huán)群變?yōu)榱?/p>
,我們只需要證明以下運算為同態(tài)(homomorphism):
因為對于同態(tài)來說,根據(jù)第一同構(gòu)基本定理(First Isomorphism Theorm)可以推理出每個輸出對應(yīng)著相同數(shù)量的輸入。而因為每個循環(huán)群中單個輸入
在原分布D上有著相同的概率,意味著每個輸出
也具備相同的概率,也意味著
不具備視覺手性。證明同態(tài)的步驟如下:
以上為命題3的證明。通過命題3,我們知道了J和T的交換律與處理后圖像分布的視覺手性的關(guān)系。那么,只需要通過檢查交換律,我們便可以判斷圖像處理是否可能產(chǎn)生新的視覺手性。檢查的方式也很簡單,對于任意圖片x,我們只需要計算其交換殘差(commutative residual)是否為0:
下圖形象的解釋了交換殘差的計算過程:
文中使用去馬賽克、JPEG壓縮、以及兩者結(jié)合這三種圖像處理方法,對于鏡像翻轉(zhuǎn)這一圖片變換方式分別計算了交換殘差。
當(dāng)去馬賽克處理的圖像寬度為奇數(shù)時,處理后的圖像分布可能具備視覺手性;反之如果為偶數(shù),則不具備視覺手性。當(dāng)JPEG壓縮的圖片不為16整除時,處理后的圖像分布可能具備視覺手性,反之則不具備。當(dāng)兩者結(jié)合后,處理后的圖片一定具備視覺手性:
作者為了驗證這些結(jié)論,在原本不具備視覺手性的人工數(shù)據(jù)集(高斯分布生成的隨機圖片)上,對不同寬度的圖片分別進行了這三種處理,并使用神經(jīng)網(wǎng)絡(luò)進行了自監(jiān)督學(xué)習(xí)。實驗結(jié)果符合這一測試的預(yù)期。因為大量互聯(lián)網(wǎng)圖片都經(jīng)過了去馬賽克和JPEG壓縮,這一結(jié)論意味著數(shù)字圖像處理所帶來的視覺手性現(xiàn)象在互聯(lián)網(wǎng)圖片中廣泛存在。
當(dāng)加入隨機剪裁(random cropping)后,我們還能得到這一結(jié)論么?作者的答復(fù)是肯定的。
為了理解隨機剪裁對于視覺手性的影響,作者提到了兩個關(guān)鍵點。
第一點:命題三中只討論了單種J的情況。而隨機剪裁可以被視為許多種J(例如
是向右平移一格并剪裁,
是向右平移兩個并剪裁)的結(jié)合,每一種有相同概率出現(xiàn)。
第二點:命題三中并沒有討論T和J不具備交換律的情況。例如當(dāng)J是向?qū)D片右平移十個像素并進行一次中心剪裁時,T和J無法具備交換律。在這種情況下,新的圖像分布并不一定具備視覺手性。
對于第一點來說,假設(shè)我們有多種不同的J(例如
,
,
),而他們分別與T具備交換律時,我們可以用以下公式表達新的圖像分布:

請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
8月5日立即報名>> 【在線會議】CAE優(yōu)化設(shè)計:醫(yī)療器械設(shè)計的應(yīng)用案例與方案解析
-
8月14日立即報名>> 【在線研討會】解析安森美(onsemi)高精度與超低功耗CGM系統(tǒng)解決方案
-
精彩回顧立即查看>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍皮書》
-
精彩回顧立即查看>> 7月30日- 8月1日 2025全數(shù)會工業(yè)芯片與傳感儀表展
-
精彩回顧立即查看>> 全數(shù)會2025(第六屆)機器人及智能工廠展
-
精彩回顧立即查看>> OFweek 2025 具身機器人動力電池技術(shù)應(yīng)用大會
推薦專題
- 1 AI產(chǎn)業(yè)的新高度!英偉達成為全球首家市值破4萬億美元的公司
- 2 傳魏建軍與賈躍亭合作,長城汽車出海美國
- 3 一文讀懂:到底什么是 “具身智能” ?
- 4 黃仁勛:與雷軍長期合作,共探AI智駕
- 5 具身智能泡沫爭議下,華映資本尋找「穿越周期者」
- 6 中國平安們欲靠AI守“陣地”
- 7 官宣:智元機器人借殼上市,A股人形機器人第一股!
- 8 華為讓渡“三界”銷售主導(dǎo)權(quán),智界高管:終于能全力奔跑了
- 9 借仿生手實現(xiàn)突圍,國產(chǎn)靈巧手破局“不可能三角”
- 10 DeepSeek R2加持,中國AI與芯片產(chǎn)業(yè)迎來新一輪協(xié)同進化