AI驅動“無感”發言者追蹤,Q-SYS VisionSuite為混合辦公注入新活力
來源:聚灃視聽 編輯:ZZZ 2024-07-31 18:10:05 加入收藏
AI驅動“無感”發言者追蹤
Q-SYS于2023年收購了Seervision,一家總部位于瑞士的工業公司,致力于開發人工智能(AI)驅動的相機自動化軟件。它可以識別和跟蹤人物的動作,當人物對象移動時,攝像機能自動調整焦距、變焦和圖片細節,保證精準生動的攝影。
Q-SYS將Seervision基于AI驅動的視覺場景分析 與Q-SYS ACPR多攝像機預置位調用 、Q-SYS AutoFraming自動構圖 和Q-SYS Control自動化控制 集成,打造VisionSuite智能化會議解決方案 ,利用人體姿態探測進行視覺追蹤,實現自然流暢、自適應的發言者追蹤和C位構圖,為現場和遠程的會議、教學、協作等帶來非凡的視聽、互動交流體驗。無論身在何處,該系統都能確保他們感受到團隊之間的緊密凝聚與聯系,持續保持高度的專注和參與熱情。不僅適用于演講、教育、大型會議等多種混合會議場景,還可應用于電視轉播、舞臺表演及體育賽事等多元場景。
對現場和虛擬體驗的“重新定義”
Q-SYS VisionSuite在演講者追蹤方面實現了對現場和虛擬體驗的“重新定義”。主要體現在:
演講者無感體驗 :VisionSuite產品利用AI技術,特別是計算機視覺追蹤,實現了對演講者動作的精準捕捉和畫面的無縫跟隨。相較于傳統技術,演講者在使用過程中幾乎感覺不到系統的存在,從而獲得“無感”的使用體驗,這是對以往演講者追蹤技術的重大顛覆。
多模態融合 :目前市場上有各種追蹤技術,主要分為基于語言和視覺分析兩大類。無論是基于語言還是圖像分析,它們都各有利弊。而Q-SYS VisionSuite在這方面獨樹一幟,創新地結合了這兩種分析方式,能夠根據實際場景和需求靈活選擇或融合使用不同算法,確保在各種復雜條件下都能實現自然、絲滑的追蹤效果,極大提升用戶體驗和適應性。
視覺分析與技術門檻 :Q-SYS采用了外置GPU顯卡以增強視覺分析能力,確保系統擁有強大的算力來支持復雜的AI和視覺運算。盡管目前僅發布了首個版本,但其軟件具有巨大的開發潛力,用戶只需通過在線軟件升級即可享受到不斷優化和擴展的使用體驗。
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643185_540686290.jpg)
技術亮點
釋放演講者的力量,為遠程學習和高影響力協作空間提供支持。借助 Q-SYS Seervision AI 加速器,Q-SYS 利用基于計算機視覺的場景分析和自適應全身追蹤技術,自動追蹤并框定演講者,以提供更加自然的體驗。
追蹤定制與行為預測
- Adaptive Full Body Tracking -
全身自動攝像追蹤技術 可確保演講者始終保持在視野范圍內,即使演講者轉身背對攝像頭,也能實現流暢的演播級水平的自動追蹤,同時過濾不必要的視覺噪聲。其專有算法可預測運動 ,系統能夠根據演講者的移動速度和方向調整攝像頭移動,就如同一個經驗豐富的攝影師在操作,以確保始終呈現出最佳的畫面布局,同時為遠端觀眾創造自然的觀看體驗。
AI人體姿態檢測
- AI Human Pose Detection -
與傳統的面部檢測和目標追蹤不同,Q-SYS VisionSuite采用了人體姿態檢測HPE技術 。通過識別人體關鍵點,即使在多人場景中也能準確鎖定并跟蹤制定目標。這種技術能夠有效區分真實人物 與圖片或視頻中的人物形象,避免了誤判導致的追蹤錯誤。
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643189_1963229417.jpg)
基于視覺的控制和自動化
- Vision-Based Zones -
通過使用觸發區域功能 ,Seervision 可以實時對舞臺上發生的活動做出反應。您可以創建自定義設置 ,這些設置會根據演講者所在的位置以及他們在特定區域停留的時間長短來觸發。(以下視頻為例,在綠色區域觸發全身取景,在紅色區域觸發上半身特寫)
靈活多變的追蹤模式
- Customizable Tracking -
您可以創建動態鏡頭,實時調整以適應演講者的身體尺寸。針對單人演講、多人演講以及與電子白板互動等不同情況,系統可根據不同的演講風格進行場景優化 ,調整畫面切換與鏡頭運動,提供最佳的視覺呈現。
無縫的Q-SYS集成
- Seamless Q-SYS Integration -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643193_1295903861.jpg)
Q-SYS VisionSuite相關設備
Seervision服務器是基于IP的,只需要一根網線 就可以與Q-SYS集成。Seervision解決方案使用視頻數據來分析和控制專用的Q-SYS網絡攝像機,且不會影響實際的視頻信號。
Seervision僅與Q-SYS NV系列網絡攝像機兼容:
NC-12x80 / NC-20x60 網絡攝像機:用于演講者追蹤或固定視角
NC-110 網絡攝像機:用于廣角或固定視角
通過Q-SYS控制實現房間自動化
- Room Automation via Q-SYS Control -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643203_354106430.jpg)
將智能攝像跟蹤與 Q-SYS 控制系統相結合,可為您的系統配備原生 Q-SYS 設備和其他第三方房間設備的完全自動化控制 。想象一下,演講者只需走進房間的特定區域即可觸發燈光變化或切換顯示器的電源,“無感”地實現卓越的混合會議視聽體驗。
應用場景示例
Q-SYS VisionSuite 提供了一種可擴展的智能視頻解決方案,能夠滿足會議室、講堂和高效協作空間中的各種演示和協作需求。以下是一些初始用例的示例。我們將很快支持更多的應用場景。
單一演講者
- Single Presenter -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643203_1675382366.jpg)
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643204_1172645306.jpg)
攝像機設置:
一臺演講者追蹤攝像機:Q-SYS 網絡云臺攝像機
適用場景:
教室
講堂/全員會議室
會議室
可分割的房間
用戶體驗:
攝像頭從用戶設置的默認位置啟動,并自動追蹤進入“演講者追蹤區域 ”的演講者。
當演講者離開“演講者追蹤區域”時,演講者追蹤攝像機自動恢復到用戶設置的默認位置(例如房間的廣角畫面)。
單一演講者+靜態視圖
- Single Presenter+Static View -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643508_1175803295.jpg)
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643523_892377239.jpg)
攝像機設置:
一臺演講者追蹤攝像機(主):Q-SYS 網絡云臺攝像機
一臺靜態視圖攝像機(輔):Q-SYS 網絡電動云臺或云臺攝像機
適用場景:
教室
講堂/全員會議室
會議室
用戶體驗:
主攝像頭從用戶設置的默認位置啟動,并自動追蹤進入“演講者追蹤區域”的演講者。
當演講者進入預設好的“觸發區域-白板視圖 ”時,系統會迅速切換至靜態視圖攝像機,為觀眾清晰地呈現白板內容。
如果沒有演講者在“演講者追蹤區域”或“觸發區域-白板視圖”,主攝像頭將自動恢復到用戶設置的默認位置(例如房間的廣角視圖)。
單一演講者+靜態視圖+ACPR
- Single Presenter+Static View+ACPR -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643551_284562664.jpg)
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643591_1123095077.jpg)
攝像機設置:
一臺演講者追蹤攝像機:Q-SYS 網絡云臺攝像機
一臺靜態視圖攝像機:Q-SYS 網絡電動云臺或云臺攝像機
ACPR攝像機:Q-SYS 網絡電動云臺或云臺攝像機(無數量限制)
適用場景:
教室
講堂/全員會議室
會議室
可分割的房間
用戶體驗:
主攝像頭從用戶設置的默認位置啟動,并自動追蹤進入“演講者追蹤區域”的演講者。
當演講者進入預設好的“觸發區域-白板視圖”時,輔助攝像頭會自動對準白板,提供一個固定的白板視圖。
如果沒有演講者進入“演講者追蹤區域”或“觸發區域-白板視圖”,主攝像頭將自動恢復到用戶設置的默認位置(例如房間的廣角視圖)。
當參會者發言 時,Q-SYS 使用房間內麥克風的數據來觸發用戶設置的攝像機預設,并將實時視頻流切換到發言者畫面 。
多演講者
- Multi-Presenter -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643623_380577810.jpg)
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643835_2143250853.jpg)
攝像機設置:
一臺演講者追蹤攝像機(主):Q-SYS 網絡云臺攝像機
一臺指揮者攝像機(輔):Q-SYS 網絡電動云臺或云臺攝像機
適用場景:
講堂/全員會議室
用戶體驗:
主攝像頭從用戶設置的默認位置啟動,并自動追蹤進入“演講者追蹤區域”的第一個演講者。
當在“演講者追蹤區域”內檢測到第二位演講者時 ,實時視頻流會切換到指揮者攝像機 ,以更寬廣的角度呈現兩位演講者的互動(只要兩位演講者都保持在追蹤區域內)。
畫面會持續保持在指揮者追蹤攝像機上,一旦其中一位演講者離開了“演講者追蹤區域”,畫面將切換回主攝像機,捕捉并追蹤留下的那位演講者。
量身定制的解決方案
- Tailored for Every Space -
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643837_1826830860.gif)
Q-SYS VisionSuite 解決方案可以靈活適應各種更為復雜的房間類型 (如靈活分隔空間)。這種設計可以根據房間的配置啟用不同的使用模式。例如,當房間被分隔成多個空間時,您可以使用單一演講者追蹤模式;當房間合并為一個整體時,則可以啟用多個演講者追蹤模式。
系統概述
![](http://img.dav01.com/eRemote/2024/7/31/dav01_236858_1722420643965_1239645667.jpg)
AI技術在PRO AV行業中創造巨大價值,并推動行業向前發展。Q-SYS VisionSuite作為一個創新的智能化會議解決方案,區別于市場上其他同類技術,對提升會議質量、增加互動性方面起到關鍵的作用。在大型演講、遠程教育、混合會議方面有極高的應用價值,可以為企業、學校/高校、酒店/大型場所等帶來無限的可能。
評論comment