AI驅動(dòng)“無(wú)感”發(fā)言者追蹤，Q-SYS VisionSuite為混合辦公注入新活力

AI驅動(dòng)“無(wú)感”發(fā)言者追蹤

　　Q-SYS于2023年收購了Seervision，一家總部位于瑞士的工業(yè)公司，致力于開(kāi)發(fā)人工智能(AI)驅動(dòng)的相機自動(dòng)化軟件。它可以識別和跟蹤人物的動(dòng)作，當人物對象移動(dòng)時(shí)，攝像機能自動(dòng)調整焦距、變焦和圖片細節，保證精準生動(dòng)的攝影。

　　Q-SYS將Seervision基于A(yíng)I驅動(dòng)的視覺(jué)場(chǎng)景分析 與Q-SYS ACPR多攝像機預置位調用 、Q-SYS AutoFraming自動(dòng)構圖 和Q-SYS Control自動(dòng)化控制 集成，打造VisionSuite智能化會(huì )議解決方案 ，利用人體姿態(tài)探測進(jìn)行視覺(jué)追蹤，實(shí)現自然流暢、自適應的發(fā)言者追蹤和C位構圖，為現場(chǎng)和遠程的會(huì )議、教學(xué)、協(xié)作等帶來(lái)非凡的視聽(tīng)、互動(dòng)交流體驗。無(wú)論身在何處，該系統都能確保他們感受到團隊之間的緊密凝聚與聯(lián)系，持續保持高度的專(zhuān)注和參與熱情。不僅適用于演講、教育、大型會(huì )議等多種混合會(huì )議場(chǎng)景，還可應用于電視轉播、舞臺表演及體育賽事等多元場(chǎng)景。

對現場(chǎng)和虛擬體驗的“重新定義”

　　Q-SYS VisionSuite在演講者追蹤方面實(shí)現了對現場(chǎng)和虛擬體驗的“重新定義”。主要體現在：

　　演講者無(wú)感體驗 ：VisionSuite產(chǎn)品利用AI技術(shù)，特別是計算機視覺(jué)追蹤，實(shí)現了對演講者動(dòng)作的精準捕捉和畫(huà)面的無(wú)縫跟隨。相較于傳統技術(shù)，演講者在使用過(guò)程中幾乎感覺(jué)不到系統的存在，從而獲得“無(wú)感”的使用體驗，這是對以往演講者追蹤技術(shù)的重大顛覆。

　　多模態(tài)融合 ：目前市場(chǎng)上有各種追蹤技術(shù)，主要分為基于語(yǔ)言和視覺(jué)分析兩大類(lèi)。無(wú)論是基于語(yǔ)言還是圖像分析，它們都各有利弊。而Q-SYS VisionSuite在這方面獨樹(shù)一幟，創(chuàng )新地結合了這兩種分析方式，能夠根據實(shí)際場(chǎng)景和需求靈活選擇或融合使用不同算法，確保在各種復雜條件下都能實(shí)現自然、絲滑的追蹤效果，極大提升用戶(hù)體驗和適應性。

　　視覺(jué)分析與技術(shù)門(mén)檻 ：Q-SYS采用了外置GPU顯卡以增強視覺(jué)分析能力，確保系統擁有強大的算力來(lái)支持復雜的AI和視覺(jué)運算。盡管目前僅發(fā)布了首個(gè)版本，但其軟件具有巨大的開(kāi)發(fā)潛力，用戶(hù)只需通過(guò)在線(xiàn)軟件升級即可享受到不斷優(yōu)化和擴展的使用體驗。

　　技術(shù)亮點(diǎn)

　　釋放演講者的力量，為遠程學(xué)習和高影響力協(xié)作空間提供支持。借助 Q-SYS Seervision AI 加速器，Q-SYS 利用基于計算機視覺(jué)的場(chǎng)景分析和自適應全身追蹤技術(shù)，自動(dòng)追蹤并框定演講者，以提供更加自然的體驗。

　　追蹤定制與行為預測

　　- Adaptive Full Body Tracking -

　　全身自動(dòng)攝像追蹤技術(shù) 可確保演講者始終保持在視野范圍內，即使演講者轉身背對攝像頭，也能實(shí)現流暢的演播級水平的自動(dòng)追蹤，同時(shí)過(guò)濾不必要的視覺(jué)噪聲。其專(zhuān)有算法可預測運動(dòng) ，系統能夠根據演講者的移動(dòng)速度和方向調整攝像頭移動(dòng)，就如同一個(gè)經(jīng)驗豐富的攝影師在操作，以確保始終呈現出最佳的畫(huà)面布局，同時(shí)為遠端觀(guān)眾創(chuàng )造自然的觀(guān)看體驗。

　　AI人體姿態(tài)檢測

　　- AI Human Pose Detection -

　　與傳統的面部檢測和目標追蹤不同，Q-SYS VisionSuite采用了人體姿態(tài)檢測HPE技術(shù) 。通過(guò)識別人體關(guān)鍵點(diǎn)，即使在多人場(chǎng)景中也能準確鎖定并跟蹤制定目標。這種技術(shù)能夠有效區分真實(shí)人物 與圖片或視頻中的人物形象，避免了誤判導致的追蹤錯誤。

　　基于視覺(jué)的控制和自動(dòng)化

　　- Vision-Based Zones -

　　通過(guò)使用觸發(fā)區域功能 ，Seervision 可以實(shí)時(shí)對舞臺上發(fā)生的活動(dòng)做出反應。您可以創(chuàng )建自定義設置 ，這些設置會(huì )根據演講者所在的位置以及他們在特定區域停留的時(shí)間長(cháng)短來(lái)觸發(fā)。(以下視頻為例，在綠色區域觸發(fā)全身取景，在紅色區域觸發(fā)上半身特寫(xiě))

　　靈活多變的追蹤模式

　　- Customizable Tracking -

　　您可以創(chuàng )建動(dòng)態(tài)鏡頭，實(shí)時(shí)調整以適應演講者的身體尺寸。針對單人演講、多人演講以及與電子白板互動(dòng)等不同情況，系統可根據不同的演講風(fēng)格進(jìn)行場(chǎng)景優(yōu)化 ，調整畫(huà)面切換與鏡頭運動(dòng)，提供最佳的視覺(jué)呈現。

　　無(wú)縫的Q-SYS集成

　　- Seamless Q-SYS Integration -

Q-SYS VisionSuite相關(guān)設備

　　Seervision服務(wù)器是基于IP的，只需要一根網(wǎng)線(xiàn) 就可以與Q-SYS集成。Seervision解決方案使用視頻數據來(lái)分析和控制專(zhuān)用的Q-SYS網(wǎng)絡(luò )攝像機，且不會(huì )影響實(shí)際的視頻信號。

　　Seervision僅與Q-SYS NV系列網(wǎng)絡(luò )攝像機兼容：

　　NC-12x80 / NC-20x60 網(wǎng)絡(luò )攝像機：用于演講者追蹤或固定視角

　　NC-110 網(wǎng)絡(luò )攝像機：用于廣角或固定視角

　　通過(guò)Q-SYS控制實(shí)現房間自動(dòng)化

　　- Room Automation via Q-SYS Control -

　　將智能攝像跟蹤與 Q-SYS 控制系統相結合，可為您的系統配備原生 Q-SYS 設備和其他第三方房間設備的完全自動(dòng)化控制 。想象一下，演講者只需走進(jìn)房間的特定區域即可觸發(fā)燈光變化或切換顯示器的電源，“無(wú)感”地實(shí)現卓越的混合會(huì )議視聽(tīng)體驗。

　　應用場(chǎng)景示例

　　Q-SYS VisionSuite 提供了一種可擴展的智能視頻解決方案，能夠滿(mǎn)足會(huì )議室、講堂和高效協(xié)作空間中的各種演示和協(xié)作需求。以下是一些初始用例的示例。我們將很快支持更多的應用場(chǎng)景。

　　單一演講者

　　- Single Presenter -

　　攝像機設置：

　　一臺演講者追蹤攝像機：Q-SYS 網(wǎng)絡(luò )云臺攝像機

　　適用場(chǎng)景：

　　教室

　　講堂/全員會(huì )議室

　　會(huì )議室

　　可分割的房間

　　用戶(hù)體驗：

　　攝像頭從用戶(hù)設置的默認位置啟動(dòng)，并自動(dòng)追蹤進(jìn)入“演講者追蹤區域 ”的演講者。

　　當演講者離開(kāi)“演講者追蹤區域”時(shí)，演講者追蹤攝像機自動(dòng)恢復到用戶(hù)設置的默認位置(例如房間的廣角畫(huà)面)。

　　單一演講者+靜態(tài)視圖

　　- Single Presenter+Static View -

　　攝像機設置：

　　一臺演講者追蹤攝像機(主)：Q-SYS 網(wǎng)絡(luò )云臺攝像機

　　一臺靜態(tài)視圖攝像機(輔)：Q-SYS 網(wǎng)絡(luò )電動(dòng)云臺或云臺攝像機

　　適用場(chǎng)景：

　　教室

　　講堂/全員會(huì )議室

　　會(huì )議室

　　用戶(hù)體驗：

　　主攝像頭從用戶(hù)設置的默認位置啟動(dòng)，并自動(dòng)追蹤進(jìn)入“演講者追蹤區域”的演講者。

　　當演講者進(jìn)入預設好的“觸發(fā)區域-白板視圖 ”時(shí)，系統會(huì )迅速切換至靜態(tài)視圖攝像機，為觀(guān)眾清晰地呈現白板內容。

　　如果沒(méi)有演講者在“演講者追蹤區域”或“觸發(fā)區域-白板視圖”，主攝像頭將自動(dòng)恢復到用戶(hù)設置的默認位置(例如房間的廣角視圖)。

　　單一演講者+靜態(tài)視圖+ACPR

　　- Single Presenter+Static View+ACPR -

　　攝像機設置：

　　一臺演講者追蹤攝像機：Q-SYS 網(wǎng)絡(luò )云臺攝像機

　　一臺靜態(tài)視圖攝像機：Q-SYS 網(wǎng)絡(luò )電動(dòng)云臺或云臺攝像機

　　ACPR攝像機：Q-SYS 網(wǎng)絡(luò )電動(dòng)云臺或云臺攝像機(無(wú)數量限制)

　　適用場(chǎng)景：

　　教室

　　講堂/全員會(huì )議室

　　會(huì )議室

　　可分割的房間

　　用戶(hù)體驗：

　　主攝像頭從用戶(hù)設置的默認位置啟動(dòng)，并自動(dòng)追蹤進(jìn)入“演講者追蹤區域”的演講者。

　　當演講者進(jìn)入預設好的“觸發(fā)區域-白板視圖”時(shí)，輔助攝像頭會(huì )自動(dòng)對準白板，提供一個(gè)固定的白板視圖。

　　如果沒(méi)有演講者進(jìn)入“演講者追蹤區域”或“觸發(fā)區域-白板視圖”，主攝像頭將自動(dòng)恢復到用戶(hù)設置的默認位置(例如房間的廣角視圖)。

　　當參會(huì )者發(fā)言 時(shí)，Q-SYS 使用房間內麥克風(fēng)的數據來(lái)觸發(fā)用戶(hù)設置的攝像機預設，并將實(shí)時(shí)視頻流切換到發(fā)言者畫(huà)面 。

　　多演講者

　　- Multi-Presenter -

　　攝像機設置：

　　一臺演講者追蹤攝像機(主)：Q-SYS 網(wǎng)絡(luò )云臺攝像機

　　一臺指揮者攝像機(輔)：Q-SYS 網(wǎng)絡(luò )電動(dòng)云臺或云臺攝像機

　　適用場(chǎng)景：

　　講堂/全員會(huì )議室

　　用戶(hù)體驗：

　　主攝像頭從用戶(hù)設置的默認位置啟動(dòng)，并自動(dòng)追蹤進(jìn)入“演講者追蹤區域”的第一個(gè)演講者。

　　當在“演講者追蹤區域”內檢測到第二位演講者時(shí) ，實(shí)時(shí)視頻流會(huì )切換到指揮者攝像機 ，以更寬廣的角度呈現兩位演講者的互動(dòng)(只要兩位演講者都保持在追蹤區域內)。

　　畫(huà)面會(huì )持續保持在指揮者追蹤攝像機上，一旦其中一位演講者離開(kāi)了“演講者追蹤區域”，畫(huà)面將切換回主攝像機，捕捉并追蹤留下的那位演講者。

　　量身定制的解決方案

　　- Tailored for Every Space -

　　Q-SYS VisionSuite 解決方案可以靈活適應各種更為復雜的房間類(lèi)型 (如靈活分隔空間)。這種設計可以根據房間的配置啟用不同的使用模式。例如，當房間被分隔成多個(gè)空間時(shí)，您可以使用單一演講者追蹤模式;當房間合并為一個(gè)整體時(shí)，則可以啟用多個(gè)演講者追蹤模式。

　　系統概述

　　AI技術(shù)在PRO AV行業(yè)中創(chuàng )造巨大價(jià)值，并推動(dòng)行業(yè)向前發(fā)展。Q-SYS VisionSuite作為一個(gè)創(chuàng )新的智能化會(huì )議解決方案，區別于市場(chǎng)上其他同類(lèi)技術(shù)，對提升會(huì )議質(zhì)量、增加互動(dòng)性方面起到關(guān)鍵的作用。在大型演講、遠程教育、混合會(huì )議方面有極高的應用價(jià)值，可以為企業(yè)、學(xué)校/高校、酒店/大型場(chǎng)所等帶來(lái)無(wú)限的可能。