一.技術背景
視頻監控已經成為現代安防、公共安全不可缺少的技術手段，但是視頻的監視和瀏覽的低效問題一直都困擾著人們。通常一個案件涉及的視頻錄像長達幾十甚至成百上千小時數，需要幾個或十幾個人，快進瀏覽也需要看上幾個甚至十幾個小時。效率十分低下，也容易喪失破案的時機。
此外，很多重要的線索或活動對象，在監控畫面中僅僅出現十幾秒甚至數秒，而這樣的信息，散落在數十小時的視頻中，人工查看視頻時，極易遺漏這些轉瞬即逝的重要信息。據一項研究實驗表明，在連續觀察12分鐘的視頻圖像時，觀察者會錯過45%的場景，而在連續觀察22分鐘后會錯過95%的場景，從而忽略了許多重要細節。這使得視頻錄像和視頻監控系統的真正有效使用率大為降低。即使有足夠的人力和時間，通過人工查看原始視頻的方式來捕捉轉瞬即逝的線索，也是有很大風險的。
如何讓人在能夠集中精力的數分鐘內，高效的瀏覽所有數小時的視頻內容，有效的捕捉線索和可疑對象，這是一個高度面向應用的技術課題，由此視頻摘要智能分析技術應運而生。視頻摘要智能分析技術在國內尚處于研究的起步階段。視頻摘要可以縮短查看視頻的時間，視頻分析則可以縮小對象搜索范圍，兩者結合能有效解決觀看視頻費時、費力等弊端，特別適用于公安刑偵破案、重要場所區域監控，它打破了傳統觀看監控錄像的弊端，將分析人員從繁雜而枯燥的“盯屏幕”任務解脫出來，可有效的提高預防和打擊各類違法犯罪行為。
二.產品實現
shineton視頻摘要智能分析系統的基本原理是對視頻的結構和內容進行分析，從原始視頻文件中提取出有意義的部分，并將它們以某種方式進行組合，形成簡潔且能夠充分表現原始視頻內容的概要，它包括視頻摘要和視頻分析兩大功能。
（1）、視頻摘要。視頻摘要就是從時域、空域兩方面去除視頻的冗余信息，提供一個能夠概括原始視頻主要內容，但長度卻比原始視頻短而精煉的摘要視頻。研究技術主要包括視頻內容提取、摘要合成、摘要表現等。內容提取，就是對視頻內容進行理解和分析，將視頻切分成合理的基本單位，如：場景、關鍵幀、元素、軌跡等；再采用模式識別或視頻結構探測等方法，獲取能夠被計算機直接處理或能夠被人的感觀直接感覺到的信息。摘要合成，該技術可與視頻分析技術相結合，通過播放速度、播放密度等參數，將重要的元素組合在一起，完成視頻片段的重鑄，形成某種形式的視頻流。摘要表現，主要涉及基于內容的視頻分析，考慮符合人類的感觀和便于瀏覽的原則，可以設置視頻總體摘要和單個事件軌跡摘要等瀏覽方式。視頻摘要需要遵循“先分后合”的原則，將一段長的視頻，通過濃縮處理，縮短成一段短視頻的過程。實現時，可以通過對對象前景與背景的分割，從原始視頻中提取對象的活動信息，將視頻對象活動重排序實現視頻的摘要。視頻摘要包含了原視頻中所有的對象活動細節，通過觀看視頻摘要來取代觀看原始視頻，可以幾倍、幾十倍地提高觀看視頻的效率。比如，一個1小時的視頻在濃縮后，可能形成一段5分鐘的視頻摘要。觀看5分鐘的視頻摘要，就相當于觀看1小時的原視頻。

（2）、視頻分析。視頻分析就是根據用戶通過提供的對象特征（人車類別，顏色、高度、方向、速度等）、一幅樣照或素描圖，來分析已摘要視頻中的相似對象并返回結果顯示。視頻分析主要針對的是視頻中的對象，主要包括解析和反饋兩個過程。解析過程首先使用一種有效的運動分割方法提取出運動的對象，而后提取這些運動對象的基本特征作為元數據，并存放到數據庫。反饋過程則要求系統首先提取解析輸入的特征，并比對數據庫中已經存儲好的對象特征，而非直接處理視頻，最后將擁有足夠高相關度的視頻對象重組后顯示出來。視頻分析可進一步提高工作效率，比如：在一個案件中，若知道嫌疑對象的一些特征，則可以通過視頻分析技術縮小對象搜索范圍，提高辦案效率。此外，視頻分析還可以基于語義進行，如采用對象識別技術對對象進行標注和解析，構建基 存儲，實現基于語義的分析。

三.應用說明
本系統中，專業巡查人員（管理人員）瀏覽濃縮視頻列表，可以調節不同的播放速度和播放密度，發現感興趣的目標以后，選中目標將暫停播放，雙擊目標將播放目標出現時的原始視頻，右擊目標將提供保存對象視頻段或對象關鍵幀。系統提供了對象的物標、時標、流量統計等信息，同時根據對象大小、運動方向、對象顏色和指定“關注區”對對象進行過濾分析，提供更小范圍的摘要視頻。本系統相比于傳統視頻播放查找對象或事件，能提供效率數十倍，有效減輕巡查隊伍的工作負荷。