影像色彩转换课件.ppt

1、自動影像心情轉換系統自動影像心情轉換系統“Calm”l動機l文獻探討l色彩心情轉換l長條圖匹配l實驗結果l結論與未來展望大綱大綱動機動機動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望Reinhard等人在2001年提出影像色彩轉換的方法優：只需一張參考影像即可自動轉換色彩快速效果良好缺：找尋適當參考影像過程繁複動機動機動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望Reinhard等人在2001年提出影像色彩轉換的方法Shugrina等人在2006年提出利用人臉辨識

2、來偵測表情並結合影像之色彩與筆觸 動機動機動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望Reinhard等人在2001年提出影像色彩轉換的方法Shugrina等人在2006年提出利用人臉辨識來偵測表情並結合影像之色彩與筆觸 動機動機動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望Reinhard等人在2001年提出影像色彩轉換的方法Shugrina等人在2006年提出利用人臉辨識來偵測表情並結合影像之色彩與筆觸 動機動機動機動機文獻探討文獻探討色彩心情轉換色彩心情轉

3、換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望簡單、快速、效果良好 Reinhard等人在2001年提出影像色彩轉換的方法Shugrina等人在2006年提出利用人臉辨識來偵測表情並結合影像之色彩與筆觸 影像心情分類影像色彩轉換自動選取來源影像文獻探討文獻探討動機動機文獻探討文獻探討影像心情分類影像色彩轉換 自動選取來源影像色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望影像心情分類影像心情分類Wang等人在2005年提出利用語義的描述對影像做檢索區域分割模糊分類演算法色彩特徵的語義動機動機文獻探討文獻探討影像心情分類影像色彩轉換 自

4、動選取來源影像色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望影像色彩轉換影像色彩轉換Reinhard等人的色彩轉換方法),(),(refrefrefrefrefref輸入影像：input參考影像：ref),(),(inputinputinputinputinputinput影像色彩轉換影像色彩轉換Reinhard等人的色彩轉換方法 平移+伸縮+平移inputinputinput*inputrefinputrefinputrefrefrefref平移伸縮平移動機動機文獻探討文獻探討影像心情分類影像色彩轉換 自動選取來源影像色彩心情轉換色彩心情轉換長條圖匹

5、配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望自動選取來源影像自動選取來源影像Vieira等人在2003年提出五個自動選取來源影像的方法1.明亮度的長條圖(histogram)2.明亮度的部份取樣(sub-sampling)3.明亮度與梯度(gradient)的長條圖 4.明亮度與梯度的部份取樣 5.相似性(similarity)的測度(metric)動機動機文獻探討文獻探討影像心情分類影像色彩轉換自動選取來源影像色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望色彩心情轉換色彩心情轉換“Calm”色彩心情轉換色彩心情轉換影像資料庫依心情分類輸入

6、影像心情判斷選擇欲轉換之心情色彩轉換影像修正心情是否符合參考影像篩選影像符合區域分割區域調色不符合輸出影像色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像色彩心情轉換色彩心情轉換動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望色彩心情介紹色彩心情介紹參考Color Harmony2一書動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望色彩心

7、情介紹色彩心情介紹“Romantic”粉紅色是由白色混合紅色而成，紅色有著令人興奮的視覺效果，但粉紅色較平靜較柔和，讓人有浪漫的感覺。動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望色彩心情介紹色彩心情介紹“calm”在任何緊張的環境下，使用偏灰或亮度較低的藍色可達到平靜且悠閒的效果。柔和的藍色可維持一個安樂與和平的感覺。動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未

8、來展望結論與未來展望影像心情分類影像心情分類利用L2 norm算出每個像素與24類心情的距離取最近的為該像素之心情“traditional”動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望影像色彩轉換影像色彩轉換平移、旋轉、伸縮 輸入影像：input參考影像：refinputinputinputinputCovBGR),(refrefrefrefCovBGR),(動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長

9、條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望影像色彩轉換影像色彩轉換利用SVD演算法分解共變矩陣 Covinput 與 CovrefCov=UV TU和V是正交矩陣(orthogonal matrix)是共變矩陣的三個特徵值(eigenvalue)所組成的對角矩陣 主軸為最大特徵值所對應的特徵向量 利用做為伸縮值inputinputGinputGinputR),(refrefGrefGrefR),(輸入影像參考影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與

10、未來展望影像色彩轉換影像色彩轉換inputinputinputinputinputinputinputinputinputBBBGGGRRR*)/(*)/(*)/(*inputBrefBinininputGrefGinininputRrefRininBBGGRRrefinputinputrefinputinputrefinputinputBBBGGGRRR將對齊軸inputref將主軸由軸轉回動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望影像色彩轉換影像色彩轉換+參考影

11、像“welcoming”“welcoming”輸入影像“traditional”結果影像=+輸入影像“soft”參考影像“calm”影像心情轉換之結果“dependable”X影像色彩轉換影像色彩轉換動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望=動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望心情不符的原因心情不符的原因動機動機文獻探討文獻探討色

12、彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域分割區域分割心情不一致時 利用區域分割對影像做微調區域分割作法1.先建立24個堆疊2.把相同心情點放到同一堆疊3.將每個堆疊中相鄰的點合併為同一區域合為同一區域動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域分割的結果區域分割的結果利用代表色來取代該點的色彩2707個區域動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色

13、彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域調色區域調色目標心情一致結果影像比例需大於參考影像參考影像之心情“calm”動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域調色區域調色動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域調色區域調色“dependable

14、”X區域調色“calm”O3.2634 1.7073動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望“calm”？輸入影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望10張參考影像張參考影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望

15、結論與未來展望篩選影像篩選影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望評判的標準評判的標準+輸入影像參考影像“calm”結果影像=輪廓色彩動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望篩選影像篩選影像由於每類心情之參考影像數量為5至10張，故經過上述的色彩轉換之後我們必需做篩選，選出最好的結果輸出。outputoutputminjoutpu

16、tinputhwjiljiloutputinputL*|),(),(|),(1010outputoutputioutputoutputshouldhwiHiHoutputoutputshouldH*|)()(|),_(230_)*(*)*/()()(_outputoutputrefrefrefoutputshouldhwhwiHiH),_(*5.0),(*5.0)(outputoutputshouldHoutputinputLiD動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未

17、來展望篩選影像篩選影像由於每類心情之參考影像數量為5至10張，選出最好的結果輸出。outputoutputminjoutputinputhwjiljiloutputinputL*|),(),(|),(1010outputoutputioutputoutputshouldhwiHiHoutputoutputshouldH*|)()(|),_(230_)*(*)*/()()(_outputoutputrefrefrefoutputshouldhwhwiHiH),_(*5.0),(*5.0)(outputoutputshouldHoutputinputLiD明亮度長條圖之差距對應參考影像應有之長條圖

18、最後的總差距長條圖匹配長條圖匹配動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望長條圖匹配長條圖匹配影像的心情與使用者所選之心情不一致時 利用區域分割的概念來對影像做調色，直到心情長條圖趨近於參考影像為止。參考影像之心情長條圖輸入影像之心情長條圖長條圖匹配長條圖匹配輸入影像心情判斷選擇欲轉換之心情色彩轉換影像修正長條圖總差距是否收斂未收斂區域分割區域調色收斂輸出影像選擇參考影像依心情分類影像資料庫計算長條圖總差距動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望長條圖匹

19、配長條圖匹配參考影像之心情長條圖“classic”影像色彩轉換後之心情長條圖“classic”“classic”I.若是要加點動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望長條圖匹配長條圖匹配動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望長條圖匹配長條圖匹配II.若是要散點參考影像之心情長條圖“nostalgic”影像色彩轉換後之心情長條圖“subdued”“subdued”動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與

20、未來展望結論與未來展望長條圖匹配長條圖匹配長條圖匹配之結果長條圖匹配之結果參考影像之心情長條圖輸入影像之心情長條圖長條圖匹配之結果長條圖匹配之結果參考影像之心情長條圖影像色彩轉換後之心情長條圖長條圖匹配後之心情長條圖實驗結果實驗結果實驗結果實驗結果輸入影像“traditional”參考影像“welcoming”=Reinhard等人的結果“soft”我們的結果“welcoming”實驗結果實驗結果 輸入影像“professional”參考影像“soft”=Reinhard等人的結果“soft”影像色彩轉換的結果“dependable”實驗結果實驗結果輸入影像“professional”參考影像

21、“soft”=Reinhard等人的結果“soft”影像色彩轉換的結果“soft”O實驗結果實驗結果輸入影像“traditional”參考影像“soft”=Reinhard等人的結果“soft”影像色彩轉換的結果“welcoming”實驗結果實驗結果輸入影像“traditional”參考影像“soft”=Reinhard等人的結果“soft”長條圖匹配後的結果“soft”動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望結論結論成功地將輸入影像轉成使用者所選之心情能更精細的控制影像的色彩微調時保持區域的空間連續性(spatial c

22、oherence)利用長條圖匹配使輸入影像的色彩完全符合參考影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望未來展望未來展望當影像中包含一大塊連續的區域，會有破碎的情況區域分割之結果輸入影像區域調色後之結果參考影像動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望未來展望未來展望當影像中包含一大塊連續的區域，會有破碎的情況我們希望在色彩與心情之關係上找到更直觀的心情分類 將影像色彩心情轉換應用在影片上 報告結束報告結束謝謝各位口試委員動機動機文獻探討文獻探討色彩心情

23、轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望旋轉矩陣旋轉矩陣xxxxxxRcossin0sincos0001)(yyyyyyRcos0sin010sin0cos)(10000/00/00001)(so ,22ddddRdzyyzxxzy100000001000)(ddRxxyy動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換色彩心情介紹影像心情分類影像色彩轉換區域分割區域調色篩選影像長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望區域調色區域調色利用區域分割的結果來調色結果影像心情與

24、參考影像一致結果影像比例需大於參考影像比例之算法(Maxref Secondref)/Maxref(Maxinput Secondinput)/Maxinput動機動機文獻探討文獻探討色彩心情轉換色彩心情轉換長條圖匹配長條圖匹配實驗結果實驗結果結論與未來展望結論與未來展望長條圖匹配長條圖匹配1.求出應有之長條圖2.計算長條圖總距離3.將心情分三類“”，“”，“”4.區域分割5.找出差距最大的心情I.若是要加點，找“”類中大小適合且距離最近的區域II.若是要散點，找“”類中大小適合且距離最近的心情再由中找與代表點最近之區域6.區域與代表點做平均7.若所有區域皆調整過但尚未收斂，則用亮度來細分區域

25、，再繼續調整執行時間執行時間區域調色之執行時間執行時間執行時間長條圖匹配之執行時間執行時間執行時間區域調色之執行時間執行時間執行時間長條圖匹配之執行時間實驗結果實驗結果-附1（影像心情轉換）輸入影像“professional”參考影像“subdued”=Reinhard等人的結果“nostaglic”長條圖匹配後的結果“subdued”輸入影像“rich”參考影像“nostalgic”=Reinhard等人的結果“dependable”X影像色彩轉換的結果“rich”實驗結果實驗結果-附2（區域調色）輸入影像“rich”參考影像“nostalgic”=Reinhard等人的結果“dependa

26、ble”X影像色彩轉換的結果“nostalgic”O實驗結果實驗結果-附2（區域調色）執行時間執行時間-附2區域調色之執行時間輸入影像“rich”參考影像“subdued”=Reinhard等人的結果“subdued”影像色彩轉換的結果“professional”實驗結果實驗結果-附3（區域調色）輸入影像“rich”參考影像“subdued”=Reinhard等人的結果“subdued”影像色彩轉換的結果“subdued”O實驗結果實驗結果-附3（區域調色）執行時間執行時間-附3區域調色之執行時間實驗結果實驗結果-附4（長條圖匹配）輸入影像“nostalgic”參考影像“vital”=Reinhard等人的結果“rich”X影像色彩轉換的結果“earthy”實驗結果實驗結果-附4（長條圖匹配）輸入影像“nostalgic”參考影像“vital”=Reinhard等人的結果“rich”X影像色彩轉換的結果“vital”O執行時間執行時間-附4長條圖匹配之執行時間