|
CMOS圖像傳感器與CCD相比，由于能將時(shí)序處理電路和圖像信號的前端放大與數字化部分集成于一個(gè)芯片內，因此，它的發(fā)展一直受到業(yè)界的高度重視�，F在，隨著(zhù)技術(shù)與工藝的發(fā)展，CMOS圖像傳感器不僅在噪聲上得到了有效改善，而且分辨率也已得到了明顯提高。一般的彩色CMOS圖像傳感器都能達到100萬(wàn)像素。好的CMOS圖像傳感器甚至能達到300萬(wàn)像素以上。因此，CMOS圖像傳感器將以其低廉的價(jià)格、實(shí)用的圖像質(zhì)量、高集成度和相對較少的功耗，在視頻監控領(lǐng)域得到更加廣泛的應用。 TI公司的TMS320C54X系列DSP是一款性能價(jià)格比很高的16位定點(diǎn)DSP。以TMS320C5402為例，它的運行速度可以達到100MIPS，而且內部集成有高速16K X 16位的讀寫(xiě)可同時(shí)操作的快速RAM和高速I(mǎi)／O接口。因此，采用TMS320C54X可以實(shí)現圖像的壓縮、存儲、運動(dòng)圖像的識別和主控機之間通過(guò)USB或RS485接口進(jìn)行圖像或識別信息的上載等功能。 1 設計方案 1.1 設計原理 圖1是采用TMS320C5402定點(diǎn)DSP和OV6630圖像傳感器設計實(shí)現數字視頻監控終端的原理圖。 圖1中，采用FPGA產(chǎn)生圖像傳感器所需的點(diǎn)頻、行場(chǎng)同步信號以及控制寄存器的控制時(shí)序，同時(shí)，它還完成對OV6630輸出的數字圖像信號預處理的工作，包括對接收的R、G、B三種基色的原始數據進(jìn)行重新組合和適當的比例變換等，以便DSP能進(jìn)行更加有序的快速處理。另外，DSP對SDRAM和外接Flash存儲卡的訪(fǎng)問(wèn)以及SDRAM的刷新等操作也通過(guò)FPGA實(shí)現。 TMS320C5402負責對預處理后的原始數據進(jìn)行顏色校正、JPEG壓縮、存儲、圖像識別，并提供通 用的USB或RS485接口，以實(shí)現圖像及資料的上傳。經(jīng)過(guò)顏色校正后的R、G、B數字信號，通過(guò)LCD驅動(dòng)電路實(shí)現在LCD顯示屏上的顯示。 1.2 CMOS圖像傳感器的特性 (1) 功能框圖 在一個(gè)芯片CMOS圖像傳感器內，一般都包含圖2所示的功能。其中，寄存器接口采用I2C總線(xiàn)或三線(xiàn)制方式；同步信號可以從外部加入或者由時(shí)序發(fā)生器自己產(chǎn)生，為與外部視頻信號同步提供了方便；雙倍采樣電路在CMOS圖像傳感器中是必要的。它的作用是使每個(gè)像素的信號被采樣兩次：一次是有效信號；一次為本底信號。兩次信號的差值作為該像素的實(shí)際輸出信號。這種采樣方式可以 有效地降低噪聲干擾。A／D采樣分辨率一般為8～12位。 (2)圖像格式最常見(jiàn)的CMOS圖像傳感器的數據輸出格式是Bayer 原始數據輸出格式。其一般格式為： 奇數掃描行 G R G R ... 偶數掃描行 B G B G ... 根據人眼對彩色的響應帶寬不高的大面積著(zhù)色特點(diǎn)，每個(gè)像素沒(méi)有必要同時(shí)輸出三種顏色。因此，數據采樣時(shí)，奇數掃描行的第1、2、3、4……像素分別采樣和輸出G、R、G、R……數據；偶數掃描行的第1、2、3、4……像素分別采樣和輸出B、G、B、G……數據。在實(shí)際處理時(shí)，每個(gè)像素的R、G、B信號由該像素本身輸出的某一種顏色信號和相鄰像素輸出的其它顏色信號構成。這種采樣方式在基本不降低圖像質(zhì)量的同時(shí)，可以將采樣頻率降低60％以上。 由于CMOS光傳感單元對三種顏色的響應靈敏度是完全不同的，而且是非線(xiàn)性的，與亮度、增益及本身的材料相關(guān)。因此，圖像傳感器的原始數據要進(jìn)行顏色校正與補償。不同廠(chǎng)家的產(chǎn)品補償曲線(xiàn)不同，因此要設計不同的補償算法。 OV6630不僅輸出R、G、B的原始數據格式，而且在芯片內已經(jīng)集成了顏色補償算法，可以輸出符合CCIR601標準的YUV和YCrCb的視頻輸出格式。 1.3 圖像傳感器的接口設計 圖像傳感器OV6630與邏輯控制芯片直接相連，圖3是接口設計原理圖。其中SCL、SDA為I2C控制線(xiàn)；PCLK、HSYNC、VSYNC分別為點(diǎn)頻和行場(chǎng)同步輸出信號線(xiàn)；RGB[7..0]為8位圖像數據輸出信號線(xiàn)。通過(guò)Altera公司的EPMl0K30A對OV6630進(jìn)行I2C控制，包括對比度、亮度、飽和度、白平衡及自動(dòng)曝光、同步信號位置及極性輸出、幀速率和數據輸出格式控制等。為了保證數據傳輸的實(shí)時(shí)性，在EPMl0K30A內分配2組RAM 緩沖區，其大小均為352 X 16位，1組RAM中存儲1行的圖像數據。由0V6630輸入的Bayer原始數據輸出格式，經(jīng)過(guò)預處理后，每個(gè)像素點(diǎn)均輸出R、G、B數據。數據格式采用5、6、5分配原則，即紅色和藍色為5位數據寬度，綠色為6位數據寬度。因此，每個(gè)像素輸出16位數據。對352 X 288的圖像傳感器，每行共有352像素，因此，每行需要352 X 16位容量的RAM進(jìn)行存儲。兩組RAM通過(guò)奇偶行計數器進(jìn)行切換。當一行存儲完畢時(shí)，立即向DSP產(chǎn)生一個(gè)讀取該行數據的中斷申請信號。 1.4 DSP與SDRAM的接口設計 采用SDRAM可以存儲大量的圖像資料。它的控制通過(guò)FPGA實(shí)現。SDRAM采用Hynix公司的4MX 16位的HY57V641620，工作頻率可以達到100MHz以上。對SDRAM的控制主要包括以下幾個(gè)方面。 ①時(shí)序與命令的控制。主要負責模式選擇、頁(yè)面切換、讀寫(xiě)方式和自刷新起動(dòng)等控制。 ② 數據讀寫(xiě)。SDRAM與傳統EDO方式的DRAM相比，由于它通過(guò)一個(gè)高速同步時(shí)鐘進(jìn)行時(shí)序協(xié)調，因此其讀寫(xiě)速度很快。在猝發(fā)讀寫(xiě)模式下，其讀寫(xiě)時(shí)間可達20ns。 ③DMA控制。TMS320C5402對SDRAM的訪(fǎng)問(wèn)可以通過(guò)DMA方式進(jìn)行。它在啟動(dòng)DMA之前，通過(guò)控制寄存器使SDRAM工作于頁(yè)面猝發(fā)模式。 2 JPEG算法實(shí)現 JPEG壓縮是利用DCT和VLC(可變長(cháng)編碼)技術(shù)實(shí)現圖像壓縮的。在DCT變換時(shí)，以8 X 8像素為基本計算單元，其DCT變換為 其中，當i、j=0時(shí)，C(i)、C(j)=— ；其它 2情況下，C(i)、C(j)=1。i 、j表示像素位置。 具體來(lái)說(shuō)，就是將每個(gè)像素的原始內容f(x，y)分別減去128，通過(guò)上述公式得到一個(gè)經(jīng)過(guò)能量?jì)?yōu)化的8 X 8 DCT系數矩陣。然后，通過(guò)一個(gè)亮度量化矩陣和一個(gè)色度量化矩陣去一一除以對應的DCT系數矩陣，即進(jìn)行DCT系數量化，并利用Z形掃描得到一個(gè)一維量化系數序列。最后，利用標準的VLC編碼表，對該序列中的非零數掘進(jìn)行霍夫曼 編碼得到最終的JPEG壓縮數據。 由于是以8 X 8作為一個(gè)基本處理單元，因此，可以利用TMS320C5402內部的快速RAM作為緩沖區。實(shí)際表明，只需要占用DSP內部的5K字節緩沖區即可完成JPEG壓縮編碼工作。當DSP工作于100MHz主頻時(shí)，壓縮一幅視頻圖像可以在1.5s內完成。 結 論 利用16位定點(diǎn)DSP和CMOS圖像傳感器設計的數字視頻監控終端，可以實(shí)現視頻壓縮圖像的存儲與傳輸；通過(guò)利用DSP的快速運算特性，可以實(shí)現對運動(dòng)目標的有效識別。識別結果能夠及時(shí)上傳給上位機，以達到對目標的有效監控。 |
