1、現(xiàn)代檢測技術現(xiàn)代檢測技術 圖像傳感器圖像傳感器精勤求學 敦篤勵志 果毅力行 忠恕任事Xian Jiaotong University主要內容主要內容圖像傳感器圖像傳感器 圖像測量系統(tǒng)圖像測量系統(tǒng) 圖像處理技術圖像處理技術 CCD, CMOS 照明、鏡頭、圖像傳感器、圖像采集、圖像處理照明、鏡頭、圖像傳感器、圖像采集、圖像處理 基本概念、圖像增強、圖像分析基本概念、圖像增強、圖像分析 Xian Jiaotong University圖像測量系統(tǒng)圖像測量系統(tǒng) 控制中樞、圖像處理控制中樞、圖像處理 照明照明 鏡頭、圖像傳感器鏡頭、圖像傳感器 圖像采集圖像采集 視頻信號視頻信號 Xian Jiaoto

2、ng University圖像傳感器圖像傳感器v 圖像傳感器是在光電技術基礎上發(fā)展起來的圖像傳感器是在光電技術基礎上發(fā)展起來的將光學圖像轉將光學圖像轉換成電信號換成電信號的器件，分為真空管圖像傳感器和半導體圖像的器件，分為真空管圖像傳感器和半導體圖像傳感器。傳感器。v 固態(tài)圖像傳感器是高度集成的半導體光電器件，在一個器固態(tài)圖像傳感器是高度集成的半導體光電器件，在一個器件上可以完成光電信號的轉換、傳輸和處理。件上可以完成光電信號的轉換、傳輸和處理。v 固態(tài)圖像傳感器的核心是電荷轉移器件，有五種類型：固態(tài)圖像傳感器的核心是電荷轉移器件，有五種類型： 電荷耦合器件（電荷耦合器件（CCD） 互補式金屬

3、互補式金屬-氧化物氧化物-半導體（半導體（CMOS）型）型 電荷注入器件（電荷注入器件（CID） 電荷引發(fā)器件（電荷引發(fā)器件（CPD） 疊層型成像器件疊層型成像器件Xian Jiaotong University電荷耦合器件電荷耦合器件（Charge Coupled Device，簡稱，簡稱CCD）是以陣列形式排列在襯底材料上的金屬氧化物半導體是以陣列形式排列在襯底材料上的金屬氧化物半導體（Metal Oxide Semiconductor，簡稱，簡稱MOS）電容器組成的，）電容器組成的，具有光生電荷、積蓄和轉移的功能。具有光生電荷、積蓄和轉移的功能。MOS 光敏單元電荷生成光敏單元電荷生成

4、電荷耦合器件電荷耦合器件(CCD) CCD以以電荷電荷作為作為信號的載體，而不信號的載體，而不是電壓或電流。是電壓或電流。Xian Jiaotong UniversityCCD光敏像元陣列光敏像元陣列Xian Jiaotong University以以P型襯底型襯底MOS結構為例，如果在結構為例，如果在金屬電極金屬電極柵極柵極上上施加一足夠大的正點壓，半導體表面將處于深耗盡狀態(tài)，在施加一足夠大的正點壓，半導體表面將處于深耗盡狀態(tài)，在半導體表面形成電子半導體表面形成電子勢阱勢阱。半導體表面相對于體內的電勢差。半導體表面相對于體內的電勢差稱為勢阱深度。勢阱可以存儲少數(shù)載流子（在稱為勢阱深度。勢阱可

5、以存儲少數(shù)載流子（在P型襯底情況型襯底情況下少數(shù)載流子是電子），勢阱越深存儲電荷越多。下少數(shù)載流子是電子），勢阱越深存儲電荷越多。當光照射到硅片上時，在光子作用下產生電子當光照射到硅片上時，在光子作用下產生電子-空穴對，空穴對，自由電子會被勢阱收集，電子數(shù)主要取決于光照強度和收集自由電子會被勢阱收集，電子數(shù)主要取決于光照強度和收集（積分）時間的長短。（積分）時間的長短。 CCD電荷的產生電荷的產生 Xian Jiaotong University 為了將勢阱中的電荷轉為了將勢阱中的電荷轉移并輸出，每個光敏單元一移并輸出，每個光敏單元一般包括般包括3個相鄰的電極個相鄰的電極，電，電極上的脈沖電壓

6、相位依次相極上的脈沖電壓相位依次相差差120，波形都是前緣陡，波形都是前緣陡峭后緣傾斜。峭后緣傾斜。 電荷積蓄、轉移電荷積蓄、轉移 CCD電荷的收集和移位電荷的收集和移位 Xian Jiaotong University132t1t5t4t3t2198765432 在在t1時刻，電極時刻，電極1、4、7下方出現(xiàn)勢阱，并收集下方出現(xiàn)勢阱，并收集到光生電荷，電荷的多少到光生電荷，電荷的多少與光強有關。在與光強有關。在t2時刻，時刻，電壓電壓1下降，電壓下降，電壓2最高，最高，電極電極2、5、8下方勢阱最下方勢阱最深，原來存儲在電極深，原來存儲在電極1、4、7下方的電荷將在電場作下方的電荷將在電場作

7、用下轉移到用下轉移到2、5、8下方。下方。到到t3時刻，電荷全部向右時刻，電荷全部向右轉移的一步。依次類推，轉移的一步。依次類推，在在t5時刻，電荷將轉移到時刻，電荷將轉移到電極電極3、6、9下方。下方。 CCD電荷的收集和移位電荷的收集和移位 Xian Jiaotong UniversityCCD電荷的收集和移位電荷的收集和移位 Xian Jiaotong UniversityCCD可以把光信號轉換為電脈沖信號。每一個脈沖反可以把光信號轉換為電脈沖信號。每一個脈沖反應一個光敏元的受光情況，應一個光敏元的受光情況，脈沖幅度的高低反映該光敏元受脈沖幅度的高低反映該光敏元受光的強弱光的強弱，輸出脈

8、沖的順序可以反映光敏元的位置輸出脈沖的順序可以反映光敏元的位置，這就構，這就構成了圖像傳感器。成了圖像傳感器。CCD結構結構 CCD結構主要功能模塊：結構主要功能模塊： p 光敏區(qū)（成像區(qū)、光電轉換）光敏區(qū)（成像區(qū)、光電轉換）p 轉移柵（隔離，轉移電荷）轉移柵（隔離，轉移電荷）p 電荷移位寄存器陣列（電荷移位輸出）電荷移位寄存器陣列（電荷移位輸出）p 電荷電荷/電壓轉換器和電壓放大器（輸出視頻信號）電壓轉換器和電壓放大器（輸出視頻信號）Xian Jiaotong University CCD圖像傳感器一般分為圖像傳感器一般分為線型線型和和面型面型。二者的原理類。二者的原理類似，都是通過似，都是

9、通過光學成像系統(tǒng)光學成像系統(tǒng)將景物圖像成在將景物圖像成在CCD的的像敏面像敏面上。上。CCD圖像傳感器分類圖像傳感器分類 線型線型CCD可以直接接收一維光信號，主要用于測試、可以直接接收一維光信號，主要用于測試、傳真和光學文字識別技術等方面。傳真和光學文字識別技術等方面。按一定的方式將一維線型按一定的方式將一維線型CCD的光敏單元及移位寄存的光敏單元及移位寄存器排列成二維陣列，即可以構成二維面型器排列成二維陣列，即可以構成二維面型CCD。Xian Jiaotong University光敏單元轉移柵輸出不透光最簡單的線型最簡單的線型CCD是是單通道單通道式的，它包括式的，它包括感光區(qū)感光區(qū)（光

10、積分單（光積分單元）和元）和傳輸區(qū)傳輸區(qū)兩部分：感光區(qū)由一列光敏單元組成；傳輸區(qū)由轉兩部分：感光區(qū)由一列光敏單元組成；傳輸區(qū)由轉移柵及一列移位寄存器組成。光照產生的信號電荷存儲于感光區(qū)移柵及一列移位寄存器組成。光照產生的信號電荷存儲于感光區(qū)的勢阱中。在轉移脈沖到來時，光敏陣列勢阱中的電荷被并行轉的勢阱中。在轉移脈沖到來時，光敏陣列勢阱中的電荷被并行轉移到移位寄存器中，最后在時鐘脈沖的作用下一位位的移出，形移到移位寄存器中，最后在時鐘脈沖的作用下一位位的移出，形成視頻信號。傳輸區(qū)是遮光的，以防止因光生噪聲電荷的干擾造成視頻信號。傳輸區(qū)是遮光的，以防止因光生噪聲電荷的干擾造成圖像模糊。成圖像模糊。

11、線型線型CCD工作原理工作原理 Xian Jiaotong University 為了減少信號電荷在轉移過程中的損失，通常采用為了減少信號電荷在轉移過程中的損失，通常采用雙雙通道式結構通道式結構。雙通道式。雙通道式CCD有兩列移位寄存器，平行的有兩列移位寄存器，平行的分置在感光區(qū)兩側。同樣感光區(qū)的雙通道線型分置在感光區(qū)兩側。同樣感光區(qū)的雙通道線型CCD比單比單通道線型通道線型CCD的轉移次數(shù)減少一半，降低了傳輸損耗，的轉移次數(shù)減少一半，降低了傳輸損耗，同時也縮短了器件尺寸。同時也縮短了器件尺寸。 光敏單元轉移柵輸出線型線型CCD工作原理工作原理 Xian Jiaotong University

12、線型線型CCD工作原理工作原理 線掃相機線掃相機視覺檢測平臺視覺檢測平臺Xian Jiaotong University 隔列轉移結構隔列轉移結構的像敏單元的像敏單元呈二維排列，每列像敏單元被呈二維排列，每列像敏單元被遮光的垂直移位寄存器隔開，遮光的垂直移位寄存器隔開，像敏單元與垂直移位寄存器之像敏單元與垂直移位寄存器之間又有轉移控制柵。像敏單元間又有轉移控制柵。像敏單元中的信號電荷在轉移柵電壓控中的信號電荷在轉移柵電壓控制下轉移到垂直移位寄存器，制下轉移到垂直移位寄存器，然后在讀出脈沖作用下逐行轉然后在讀出脈沖作用下逐行轉移到水平移位寄存器中，再由移到水平移位寄存器中，再由水平移位寄存器快速

13、輸出，得水平移位寄存器快速輸出，得到視頻信號。到視頻信號。垂直移位寄存器水平移位寄存器輸出光敏單元轉移柵常見的結構有常見的結構有隔列轉移結構（行間傳輸）隔列轉移結構（行間傳輸）和和幀轉移結構幀轉移結構（場傳輸）（場傳輸）。面型面型CCD工作原理工作原理 Xian Jiaotong University幀轉移結構幀轉移結構包括包括成像區(qū)成像區(qū)（光（光敏區(qū)）、敏區(qū)）、電荷移位寄存器電荷移位寄存器和和水水平移位寄存器平移位寄存器三部分。三部分。當光積分周期結束時，加在當光積分周期結束時，加在成像區(qū)和存儲區(qū)電極上的時鐘成像區(qū)和存儲區(qū)電極上的時鐘脈沖使所收集到的信號電荷迅脈沖使所收集到的信號電荷迅速轉移

14、到存儲區(qū)中。然后逐行速轉移到存儲區(qū)中。然后逐行轉移到讀出寄存器并輸出。轉移到讀出寄存器并輸出。在第一幀讀出的同時，成像在第一幀讀出的同時，成像區(qū)開始收集第二幀信號電荷。區(qū)開始收集第二幀信號電荷。一旦第一幀信號被全部讀出，一旦第一幀信號被全部讀出，馬上傳送第二幀信號，實現(xiàn)連馬上傳送第二幀信號，實現(xiàn)連續(xù)輸出。續(xù)輸出。面型面型CCD工作原理工作原理 Xian Jiaotong University彩色彩色CCD結構結構 CCD硅芯片不能區(qū)分不同光譜的顏色，為了區(qū)分硅芯片不能區(qū)分不同光譜的顏色，為了區(qū)分光譜的光譜的RGB三基色，常采用兩種方式：三基色，常采用兩種方式：1. 三晶片結構三晶片結構： 利用

15、三棱鏡組將利用三棱鏡組將圖像分為圖像分為RGB三基色三基色圖像，分別投影到三圖像，分別投影到三片片CCD芯片上。芯片上。圖片質量高；結圖片質量高；結構復雜，價格昂貴構復雜，價格昂貴Xian Jiaotong University彩色彩色CCD結構結構2. 彩色濾波陣列彩色濾波陣列Bayer濾波器模式濾波器模式 彩色濾波馬賽彩色濾波馬賽克；克；犧牲分辨率，犧牲分辨率，簡化結構，降簡化結構，降低價格；低價格；通過反馬賽克通過反馬賽克算法從算法從Bayer模式圖像恢復模式圖像恢復出出RGB模式模式圖像。圖像。Xian Jiaotong University彩色彩色CCD結構結構 基于基于USB2.0

16、總線的高分辨數(shù)字圖像傳感器（總線的高分辨數(shù)字圖像傳感器（12801280* *10241024） Xian Jiaotong UniversityCCD的長寬比和尺寸的長寬比和尺寸 v CCD長寬比為長寬比為4：3，尺寸如圖所示：，尺寸如圖所示：CCD像元密度像元密度Z有效區(qū)內采樣的點數(shù)：有效區(qū)內采樣的點數(shù)：768*576, 1024*768, 2048*2048等等Xian Jiaotong University1. 響應度（靈敏度）響應度（靈敏度）：光電轉換效率，輸出電信號與：光電轉換效率，輸出電信號與輸入光信號能量之比；與入射光波長有關，因此分輸入光信號能量之比；與入射光波長有關，因此分

17、為為光譜響應度光譜響應度（對特定波長入射光）和（對特定波長入射光）和積分響應度積分響應度（對連續(xù)波長輻射光）；（對連續(xù)波長輻射光）；2. 光譜特性光譜特性：響應度與入射光頻率或波長的關系（光：響應度與入射光頻率或波長的關系（光譜峰值）；譜峰值）； CCD硅晶片對硅晶片對400nm至至1060nm的光波都很敏感，的光波都很敏感，為使為使CCD和人眼對外界圖像的感應盡可能一致，常和人眼對外界圖像的感應盡可能一致，常在在CCD前方加入紅外濾波器（前方加入紅外濾波器（Infra-Red Filter）。）。 在機器視覺中，可將在機器視覺中，可將IR濾波器去掉，或加入特定光濾波器去掉，或加入特定光譜濾波

18、器，制成紅外光感應器。譜濾波器，制成紅外光感應器。CCD的基本特性參數(shù)的基本特性參數(shù) Xian Jiaotong UniversityCCD的光譜特性的光譜特性 Xian Jiaotong UniversityCCD的光譜特性的光譜特性 可見光與近紅外混合成像，波長約為可見光與近紅外混合成像，波長約為400-1200nm Xian Jiaotong UniversityCCD的基本特性參數(shù)的基本特性參數(shù)3. 暗電流暗電流：無光信號時的輸出電流：無光信號時的輸出電流圖像噪聲；圖像噪聲；4. 分辨率分辨率：取決于光敏單元間距，常用光敏單元數(shù)表示，：取決于光敏單元間距，常用光敏單元數(shù)表示，一般像元越

19、多分辨率越高；實際分辨率還與一般像元越多分辨率越高；實際分辨率還與CCD光敏單光敏單元的中心間距、光學系統(tǒng)的放大率有關。元的中心間距、光學系統(tǒng)的放大率有關。CCD實際分辨率實際分辨率=光敏單元中心距光敏單元中心距/光學系統(tǒng)放大倍率光學系統(tǒng)放大倍率最大被測物尺寸最大被測物尺寸=最大成像尺寸最大成像尺寸/光學系統(tǒng)放大倍數(shù)光學系統(tǒng)放大倍數(shù)5. 均勻性均勻性：光敏單元對光強度響應的一致性。：光敏單元對光強度響應的一致性。Xian Jiaotong University非接觸檢測非接觸檢測;響應快響應快;可靠性高可靠性高,維修簡便維修簡便;測量精度高測量精度高;體積小體積小,重量輕重量輕; 容易與計算機連接；容易與計算機連接；對被測物體需要強光照射對被測物體需要強光照射;受被測物體以外的光的影響受被測物體以外的光的影響.CCD傳感器的應用特點傳感器的應用特點 Xian Jiaotong UniversityCMOS圖像傳感器圖像傳感器 v CMOS（Complementary Metal Oxide Semiconductor） 互補式金屬互補式金屬-氧化物氧化物-半導體半導體，NMOS和和PMOS串聯(lián)；串聯(lián)； 是集成電路中廣泛使用的一個基本單元，在動態(tài)存儲器中廣泛是集成電路中廣泛使用的一個基本單元，在動態(tài)存儲器