系統進行視頻車輛檢測，需要具備很高的處理速度并采用的算法，在基本不丟幀的情況下實現圖像采集、處理。若處理速度慢，則導致丟幀，使系統無法正確檢測到行駛速度較快的車輛，同時也難以在有利于識別的位置開始識別處理，影響系統識別率。因此，將視頻車輛檢測與牌照自動識別相結合具備一定的技術難度。

為了進行牌照識別，需要以下幾個基本的步驟：

　　· 牌照定位，定位圖片中的牌照位置；

　　· 牌照字符分割，把牌照中的字符分割出來；

　　· 牌照字符識別，把分割好的字符進行識別，終組成牌照號碼。

　　牌照識別過程中，牌照顏色的識別依據算法不同，可能在上述不同步驟實現，通常與牌照識別互相配合、互相驗證。

實際應用中，牌照識別系統的識別率與牌照質量和拍攝質量密切相關。牌照質量會受到各種因素的影響，如生銹、污損、油漆剝落、字體褪色、牌照被遮擋、牌照傾斜、高亮反光、多牌照、假牌照等等；實際拍攝過程也會受到環境亮度、拍攝亮度、車輛速度等等因素的影響。這些影響因素不同程度上降低了牌照識別的識別率，也正是牌照識別系統的困難和挑戰所在。為了提高識別率，除了不斷的完善識別算法，還應該想辦法克服各種光照條件，使采集到的圖像利于識別。

采用計算機視覺技術識別車牌的流程通常都包括車輛圖像采集，車牌定位，字符分割，光學字符識別，輸出識別結果5個步驟。車輛圖像的采集方式決定了車牌識別的技術路線。目前國際ITS通行的兩條主流技術路線是自然光和紅外光圖像采集識別。自然光和紅外光不會對人體產生不良的心理影響，也不會對環境產生新的電子污染，屬于綠色環保技術。

一個車牌識別系統的后臺管理體系，決定了這個車牌識別系統是否好用。清楚地認識到重要的一點是識別率達到是不可能的，因為車牌照污損、模糊、遮擋，或者天氣也許很糟（下雪﹑冰雹﹑大霧等等）。后臺管理體系的功能應該包括：

1、識別結果和車輛圖像數據的可靠存儲，當多功能的系統操作使得網絡出差錯時能保護圖像數據不會丟失，同時便于事后人工排查；

2、有效的自動比對和查詢技術，被識別的車牌照號碼要同數據庫中成千上萬的車牌號碼自動比對和提示報警，如果車牌照號碼沒有被正確讀取時就要采用模糊查詢技術才能得出相對“佳”的比對結果；

3、一個好的車牌識別系統對于聯網運行，還需要提供實時通信、網絡安全、遠程維護、動態數據交互、數據庫自動更新、硬件參數設置、系統故障診斷。

將車牌識別設備安裝于出入口，記錄車輛的牌照號碼、出入時間，并與自動門、欄桿機的控制設備結合，實現車輛的自動管理。應用于停車場可以實現自動計時收費，也可以自動計算可用車位數量并給出提示，實現停車收費自動管理節省人力、提率。應用于智能小區可以自動判別駛入車輛是否屬于本小區，對非內部車輛實現自動計時收費。在一些單位這種應用還可以同車輛調度系統相結合，自動地、客觀地記錄本單位車輛的出車情況。