自然環(huán)境下，汽車圖像背景復(fù)雜、光照不均勻，如何在自然背景中準確地確定牌照區(qū)域是整個識別過程的關(guān)鍵。對采集到的視頻圖像進行大范圍相關(guān)搜索，找到符合汽車牌照特征的若干區(qū)域作為候選區(qū)，然后對這些侯選區(qū)域做進一步分析、評判，后選定一個佳的區(qū)域作為牌照區(qū)域，并將其從圖象中分割出來。

完成牌照區(qū)域的定位后，再將牌照區(qū)域分割成單個字符，然后進行識別。字符分割一般采用垂直投影法。由于字符在垂直方向上的投影必然在字符間或字符內(nèi)的間隙處取得局部小值的附近，并且這個位置應(yīng)滿足牌照的字符書寫格式、字符、尺寸限制和一些其他條件。利用垂直投影法對復(fù)雜環(huán)境下的汽車圖像中的字符分割有較好的效果。

字符識別方法目前主要有基于模板匹配算法和基于人工神經(jīng)網(wǎng)絡(luò)算法?；谀０迤ヅ渌惴▽⒎指詈蟮淖址祷?并將其尺寸大小縮放為字符數(shù)據(jù)庫中模板的大小，然后與所有的模板進行匹配，后選佳匹配作為結(jié)果?；谌斯ど窠?jīng)元網(wǎng)絡(luò)的算法有兩種：一種是先對待識別字符進行特征提取，然后用所獲得特征來訓(xùn)練神經(jīng)網(wǎng)絡(luò)分配器；另一種方法是直接把待處理圖像輸入網(wǎng)絡(luò)，由網(wǎng)絡(luò)自動實現(xiàn)特征提取直至識別出結(jié)果。

實際應(yīng)用中，牌照識別系統(tǒng)的識別率與牌照質(zhì)量和拍攝質(zhì)量密切相關(guān)。牌照質(zhì)量會受到各種因素的影響，如生銹、污損、油漆剝落、字體褪色、牌照被遮擋、牌照傾斜、高亮反光、多牌照、假牌照等等；實際拍攝過程也會受到環(huán)境亮度、拍攝亮度、車輛速度等等因素的影響。這些影響因素不同程度上降低了牌照識別的識別率，也正是牌照識別系統(tǒng)的困難和挑戰(zhàn)所在。為了提高識別率，除了不斷的完善識別算法，還應(yīng)該想辦法克服各種光照條件，使采集到的圖像利于識別。

采用計算機視覺技術(shù)識別車牌的流程通常都包括車輛圖像采集，車牌定位，字符分割，光學字符識別，輸出識別結(jié)果5個步驟。車輛圖像的采集方式?jīng)Q定了車牌識別的技術(shù)路線。目前國際ITS通行的兩條主流技術(shù)路線是自然光和紅外光圖像采集識別。自然光和紅外光不會對人體產(chǎn)生不良的心理影響，也不會對環(huán)境產(chǎn)生新的電子污染，屬于綠色環(huán)保技術(shù)。

自然光路線是指白天利用自然光線，夜間采用輔助照明光源，用彩色攝像機采集車輛真彩色圖像，用彩色圖像分析處理方法識別車牌。自然光真彩色識別技術(shù)路線，與人眼感光習慣一致，并且，真彩色圖像能夠反映車輛及其周圍環(huán)境真實的圖像信息，不僅可以用來識別車牌照，而且可以用來識別車牌照顏色、車流量、車型、車顏色等車輛特征。用一個攝像機采集的圖像，同時實現(xiàn)所有前端基本視頻信息采集、識別和人工輔助圖像取證判別，可以前瞻性的為未來的智能交通系統(tǒng)工程預(yù)留接口。

識別速度決定了一個車牌識別系統(tǒng)是否能夠滿足實時實際應(yīng)用的要求。一個識別率很高的系統(tǒng)，如果需要幾秒鐘，甚至幾分鐘才能識別出結(jié)果，那么這個系統(tǒng)就會因為滿足不了實際應(yīng)用中的實時要求而毫無實用意義。例如，在高速公路收費中車牌識別應(yīng)用的作用之一是減少通行時間，速度是這一類應(yīng)用里減少通行時間、避免車道堵車的有力保障。

對于納入“黑名單”的車輛，例如：被通緝或掛失的車輛、欠交費車輛、未年檢車輛、肇事逃逸及違章車輛等，只需將其車牌號碼輸入到應(yīng)用系統(tǒng)中，車牌識別設(shè)備安裝于的路口、卡口或由執(zhí)法人員隨時攜帶按需要放置，系統(tǒng)將識讀所有通過車輛的牌照號碼并與系統(tǒng)中的“黑名單”比對，一旦發(fā)現(xiàn)車輛立刻發(fā)出報警信息。系統(tǒng)可以全天不間斷工作、不會疲勞、錯誤率極低；可以適應(yīng)高速行駛的車輛；可以在車輛行使過程中完成任務(wù)不影響正常交通；整個監(jiān)視過程中司機也不會覺察、保密性高。應(yīng)用這種系統(tǒng)將地提高執(zhí)法效率。
將的牌照信息輸入系統(tǒng)，系統(tǒng)自動地識讀經(jīng)過車輛的牌照并查詢內(nèi)部數(shù)據(jù)庫。對于需要自動放行的車輛系統(tǒng)驅(qū)動電子門或欄桿機讓其通過，對于其它車輛系統(tǒng)會給出警示，由值勤人員處理?？捎糜谔厥鈫挝唬ㄈ畿娛鹿芾韰^(qū)、保密單位、保護單位等）、路橋收費卡口、住宅區(qū)等。