你可以再靠近一點-大型創新展示圖片之設計

 

回目錄

 

摘要

『你可以再靠近一點展示圖片之設計』在技術方面結合與視覺影像有關的光電與資訊科學,以輕鬆有趣的方式,傳達出藝術人文的內涵。本創意設計運用影像視覺解析度變化的技巧,開發出視覺化『你可以再靠近一點』之影像處理科學模型。可以特殊主題之形式之相片展示於各展覽會場,遠看是一張主題相片,靠近一點來看,會發現它是由幾百張的相片拼湊而成,或是由許多有意義的文字所組成,這樣的相片,在此稱之為『你可以再靠近一點』電子照片,利用神經網路與偏移處理而達到將複數個次影像(圖片或文字),以最佳化之方式拼成一最終影像,又可插入隱藏字,兼具有特殊意義、紀念性、趣味性等等。

 

關鍵字:科學模型、神經網路、次影像、隱藏字

 

 

 

The Design of Large-Scale Picture in the Exhibition

 

 

Abstract

 

Digital image and multimedia technology projected in the optoelectronic and information experimental series to guide people to engage in the scientific model. This novel device can be operated automatically, and economically in a large scale display. In this paper, it is the main purpose to embed many colour images into a colour image by use of the neural network technology and the characteristic of the color harmony. The neural network system uses a hierarchical pattern detection scheme or system which includes both a low- and top-level pattern detection system.  The low-level is responsible and capable of detecting the sub-patterns. The top-level detects the patterns and outline and identify the class to which the patterns belong.

We obtain the binary images form the original, and the binary images take pixelization later soon. We develop a new method to process the experimental data and evaluate the effect of signal to noise ratio in the PC-base digital signal processing system. This novel device can be operated automatically, and economically in a participle display of the scientific model. Furthermore, It can be used to protect the information of secret. It also can remind the attention of the participant with the sign of a speech sound to achieve the effect of during recreation to learn.

 

keywordsscientific model, neural network system, top-level pattern detection system, information of secret

 

 

 

1. 前言

   

在科博館的展示中,常可見到圖中有圖或圖中有字的作品,以特殊主題之形式之相片展示於各展覽會場,遠看是一張主題相片,靠近一點來看,會發現它是由幾百張的相片拼湊而成,或是由許多有意義的文字所組成,例如由幾百張二二八歷史照片拼湊成紀念館的風景照,或是由幾百張美國內戰照片拼湊成林肯照片。本創作之主要目的,在於提供一種具有神經網路比對處理之數位影像科學模型系統及處理方法,其巧妙的搭配神經網路與偏移處理之方式,使比對過程中能找到最佳之對應關係,複數個次影像在排列上可以略為偏移,進而能產生一整張更逼真之最終影像。

  本創作之次一目的,在於提供一種具有數位影像科學模型系統[1-3]、處理方法[4-5]及其成品[6-8],其在神經網路比對處理之技術方面結合與視覺影像有關的光電與資訊科學,以輕鬆有趣的方式,傳達出藝術人文的內涵。這樣的相片,我在此稱之為『你可以再靠近一點』電子照片。

 

2. 原理與分析

『你可以再靠近一點』照片可利用點素合併法來達到解析度轉換,點素合併法又稱為點素化(pixellation)或馬賽克(Mosaic)處理,通常實施於一些不宜顯露的畫面,例如媒體上不能曝光的受訪者或超出尺度的鏡頭,經過點素合併處理後,整個畫面的點素變得較大,有點類似透過馬賽克窗戶來觀看一般。

點素合併處理是將遮罩中所有點素的灰度值加總後求其平均,然後重新寫入遮罩中的每一點素之灰度值中,這樣的操作可以想像新的畫面雖然細部的結構不可分辨。此法所使用的遮罩可視需要作調整,遮罩寬度可以是奇數或偶數。並且也可以是長寬不相等的長方形,當遮罩寬度越大,則處理後畫面的點素就變得越大,如圖1圖上左為原圖,圖上右是一個 33 之點素運算結果,圖下左是一個 1010 之點素運算結果,圖下右是一個 2020 之點素運算結果。

 

1 一個影像之原圖與點素運算結果

33 之點素運算來說,對於一個點 G(x,y) 及其 8 鄰接點之灰度值會相等:

               (1)

33 這種微量的之點素運算結果,能提供有點像一些沙龍藝術照布面處理的朦朧感覺。雖然點素運算會有若干損失,然而還在可此接受的範圍。我們也可透過特殊的遮罩,以類似編碼的技巧來將畫面進行處理,然後使用特定的遮罩,類似解碼的方式將畫面還原,這樣的技術也可以用在秘密的保存方面,是屬於較的特殊的影像處理領域。

當一幅影像被格子點化處理後,可以用另一種觀點看待,那就是如何在最小的誤差下,另外使用幾百幅小張的影像來合成,而 database 小張的影像樣本一般有幾千張。整張影像可看做是幾百幅小張的影像所集合而成的平均灰階經過。

對每一輸入向量                       (2)

存在一加權向量,及閥值定義為:               (3)

                                                       (4)

                                                (5)

                                           (6)

normalized 後之特定向量,這時,我們引進一神經元演算法,它的功能是當輸入一特定向量時,能訓練出一加權向量(weight vector)及門閥值(threshold value),使得關連住(associate)。當輸入向量為時,神經元門閥值會抑制此神經元發火(firing)。整個訓練過程是基於下述神經元訓練定理:

神經元訓練定理:

證明此定理可用下面兩個例子說明:

(i)          變化從

假設開始時,則

變化為1。此時,變換的結果造成總和減少1,小於門閥值,所以神經元不發火。

(ii)        變化從

假設開始時,則

變化為0。此時,變換的結果亦造成總和減少1,小於門閥值,所以神經元同樣不發火。

 

綜合上兩個例子所述,可做一結論:

當一向量與一訓練向量相差Hamming距離為d時,則

                                               (7)

其中Hamming distance

最後,我們對一組k個向量進行訓練,演算法如下:

輸入:一組向量

步驟1:輸入向量

步驟2:訓練向量

步驟3:設定第k個神經元的門閥值

步驟4:對於每一個,重複步驟1,直到訓練完所有向量。

輸出:一組訓練完成的神經元加權向量及門閥值

 

本神經網路架構是多層次的設計,主要構造有高、低兩層。

(a)        高層單元架構

經過濾波、影像增強及邊緣偵測等前處理過程,使影像成為一張具有25×25格子點之影像圖。此張原始圖可被分割成255×5的次單元,圖2為次單元跟主單元之間的相互關係。

     

2 (a) 影像分割25×25示意圖         (b) 神經元連接圖

所以,對每一個主尋求吻合神經元來說,它包含有25個次級尋求吻合神經元,代號分別是1,2,3...25。這些次級尋求吻合神經元的工作就是負責記住訓練樣本圖中相對應的格子點。

(b)       低層單元架構

現在開始詳細介紹次級神經元如何作尋求吻合的工作。我們在次級神經元下多安排了一層移位神經元,即使尋求吻合樣本跟訓練樣本具有些微的雜訊或偏移,網路本身仍然可以做出正確的判斷。舉代號8這個次級尋求吻合神經元為例:它是主尋求吻合神經元下的一個次級單元,左上角的座標(x,y)(10,5),右下角座標(x,y)(14,9)。此處以左上角坐標當作此次級單元的座標原點。在每一個次級單元下包含了9個移位神經元,也就是說次級單元的座標原點可在x軸及y軸上自由移位;換句話說,代號8之次級神經元的座標原點可以在(9,4)(11,6)下自由移動。當這9個移位神經元中任何一個有正確的辨認結果,則次級神經元8激發成功(簡稱發火)

3表示次級尋求吻合神經元與移位神經元間的相互關係,圖4則為整個網路的架構圖。

3 次級尋求吻合神經元與移位神經元間的相互關係

 

4 整個尋求吻合網路的架構圖

    假設P代表尋求吻合之主神經元,代表次級神經元,則。對每一個次級神經元而言,其下包含9個移位神經元,而每一個移位神經元都有代表單一格子點的灰階值。

對每一個向量而言,它的加權向量值,神經元的門檻值為,計算方法如下:

                                                                                                     (8)

                                                     (9)

在訓練的過程中,加權向量值記住了訓練樣本;當樣本輸入次級單元,則門檻值會抑制神經元,使其不發火。數學意義如下:

                                            (10)

為了增加雜訊的容忍度,門檻值可以有一個彈性範圍。根據經驗,我們通常取

                                                     (11)

上面所介紹的神經網路最大的好處是保證能在一次運算後找到最佳的次影像組合,在訓練過程及尋求吻合過程都是如此,所以電腦花在網路運算的時間非常短。這跟其它的類神經網路有極大的不同。

在識別動作上,第一層移位神經元若是偵測到與之相同的次單元,則第二層中,相對於此的神經元被激發;假如一個主尋求吻合神經元的25個次單元都被激發,那麼就可以宣告幾百幅小張的影像組合成功,表示主尋求吻合神經元中的記憶與樣本符合。在此處,同樣地我們也採用了彈性作法,將第三層發火的臨界值定在2223個次單元,使系統具有雜訊容忍度。

 

3. 軟硬體系統

5 科學實驗模型裝置

 

4. 實驗結果與比較

本創意設計之功能如下:

[1].             本科學模型與軟體之操作介面採用圖形操作介面,利用電腦能不厭其煩的重覆展示的特性,進行光電與資訊實驗示範。

[2].             到目前為止,並沒有人試過讓使用者之頭部只擷取一張原使影像後,再處理成『你可以再靠近一點』的科學實驗照之機器,本創作研發出新的方法以解決上述問題。

[3].             色彩的列印、顯示與隱藏:在涉及色彩的列印、顯示與隱藏的問題方面,必須利用假色 (Psedocoloring)運算,一是利用假的彩色來取代灰度值,而造成影像中某處明顯醒目易觀察的結果,另外則是常見的利用256 色來取代全彩的運算,此類運算大都牽涉到 LUT(對照表),目前在本創作開發出各式各樣的假色運算技術,以符需求。

[4].             本系統非常適於台灣本地樂曲舞蹈、美術雕刻、戲劇舞台、宗教民俗、歷史、地理等社會人文的活動之拍攝。

 

6 利用圖形組成紀念照(完整圖及局部圖)

   

7 利用圖形組成紀念照之基底圖片

 

8 利用『逢甲大學自動控制工程』十字組成『你可以再靠近一點』紀念照(整體圖及局部圖)

隱藏在紀念照中的有意義句子「張翠山喜歡殷素素」

 

5. 結論

本創意設計運用影像視覺解析度變化的技巧,開發出視覺化『你可以再靠近一點』之影像處理系統,並致力於『你可以再靠近一點』相片製作之簡化與改良。『你可以再靠近一點』照片,可以提供於科博館科學模型,或置於科博館販賣部,讓參觀者可以拍攝屬於自己的『你可以再靠近一點』紀念照。另外也可透過多樣形式的圖畫卡片,以隨時引起參觀者興趣及印象,特別像顏色、形狀等,以卡片生動活潑的展示圖像,自然會發現很多東西是某種顏色、某種形狀所合成,感到特別的不同,進而吸引大家的目光。

本創意設計成品能夠按照需求以下列方式呈現:

1.          以特殊主題之形式提供於各展覽會場。

2.          提供於科博館科學展示模型。

3.          置於科博館販賣部,讓參觀者可以拍攝屬於自己的『你可以再靠近一點』紀念照。

4.          應用於書本插圖或卡片,運用彩色合成和分解的技巧,在圖卡上最奇妙的地點,最奇妙的地方會出現最奇妙的人物或圖案。

 

誌謝

本論文經費來源由國科會計畫NSC 94-2515-S-035-002 所提供,特此致謝。

 

參考文獻

[1]       Chern-Sheng Lin, Yun-Long Lay , Chien-Wa Ho, Albert Chin-Yuh Lin, Nin-Chun Chang, A novel experimental device with modified laser shadow spot and optical strain gauge set-up, Measurement, 37(1), 9-19 , 2005

[2]       林宸生,「東西斷裂它先知!!!」---雷射投影光點實驗,科技博物,民國887月,vol.3(4), pp.112-119

[3]       林宸生,「一種可同時操做光學應變規及雷射投影光斑之引導式科學實驗裝置」中華民國新型專利,公告編號:351452,證書編號:143728號,1999

[4]       林宸生、柯文卿,「光學實驗用之影像處理系統」中華民國發明專利1999公告編號:372271

[5]       林宸生,「拍攝疊紋紀念照之引導式科學模型裝置」中華民國新型專利,2001公告編號:430067

[6]       Kim, Man Bae; Nam, Jeho; Baek, Woonhak; Son, Jungwha; Hong, Jinwoo, The adaptation of 3D stereoscopic video in MPEG-21 DIA, Signal Processing: Image Communication Volume: 18(8), pp. 685-697, 2003 

[7]       Kim, Seung-Cheol; Kim, Eun-Soo, A new liquid crystal display-based polarized stereoscopic projection method with improved light efficiency, Optics Communications Volume: 249(1-3), pp. 51-63, 2005,

[8]       Kawai, Takashi, 3D displays and applications, Displays Volume: 23(1-2), pp. 49-56, 2002