Tencent und Insta360 haben gemeinsam ein neues intelligentes Audio-Produkt vorgestellt: Überwindung der vertikalen Positionierung und Definition eines neuen Standards für die Innenraum-Audiovideo-Kollaboration | Die neuesten Nachrichten

Text | Zhang Ziyi

Redaktion | Yuan Silai

Ende September dieses Jahres kündigte Insta360 die Einführung des Wave AI Rundumaufnahmemikrofons an, das mit der Tencent Tianlai Inside - Lösung ausgestattet ist. Bei einer kürzlich stattgefundenen Pressekonferenz haben beide Seiten erstmals den dreijährigen Prozess der tiefgreifenden gemeinsamen Entwicklung preisgegeben.

Diese Partnerschaft zielt darauf ab, die Innovationen von Insta360 in der Hardwareentwicklung mit der umfangreichen Erfahrung von Tencents Tianlai - Labor in der Audio - Algorithmenentwicklung zu verbinden, um die zentralen Audio - Probleme in Innenraumkonferenzen, Fernkooperationen und professionellen Inhaltserstellungsszenarien zu lösen.

Die Marktausrichtung des Wave AI Rundumaufnahmemikrofons ist sehr klar. Erstens soll es eine effiziente Fernkooperation ermöglichen und Unternehmen ein immersiveres Fernkonferenz - Erlebnis bieten, indem Probleme wie ungenaue Schallortung und Störgeräusche aus der Umgebung gelöst werden, um die Kommunikationseffizienz zu verbessern. Zweitens soll es für Interviewer, die häufig externe Aufnahmen machen, eine zuverlässige Schallquellenidentifizierung, flexible Aufnahmemodi und eine einfache Transkription bieten, um die Anzahl der verstreuten Aufnahmegeräte zu reduzieren und die mühsame Nachbearbeitung zu vereinfachen. Drittens soll durch die Kombination der Audio - Algorithmen von Tencent Tianlai mit der Hardwareentwicklung von Insta360 die intelligente Mikrofonlösung für Konferenzen zum neuen Branchenstandard werden.

Aus Sicht der Audio - Lösung liegt der Kernwert des Wave AI Rundumaufnahmemikrofons auf der Softwareebene in der Fähigkeit, komplexe akustische Umgebungen präzise zu verarbeiten.

Zheng Jincong, Hardware - Produktmanager von Insta360, sagte: "Aufgrund der geringen Abstände (physikalische Beschränkungen der Hardware) muss Tianlai die Beschränkungen der Algorithmen, d. h. die Genauigkeitsbeschränkungen, überwinden, um eine gute Schallquellenortung und Rauschunterdrückung bei diesen Abständen zu bieten. Dazu gehört auch der dahinterliegende 3A - Algorithmus zur Echolöschung."

Dies bedeutet, dass diese Lösung die 3A - Algorithmen (AEC, ANC, AGC) von Tencent Meetings Tianlai - Labor, die über mehr als 20 Jahre hinweg entwickelt wurden, integriert. Sie können effektiv Echos eliminieren, Umgebungsgeräusche unterdrücken und die Lautstärke automatisch ausgleichen, um sicherzustellen, dass auch auf kleinen Array - Hardware ein klares und reines Klangbild erzielt wird.

Herkömmliche Mikrofonanordnungen konzentrieren sich hauptsächlich auf die Horizontalebene (X - Y - Achse) zur Schallquellenortung und haben Schwierigkeiten, die vertikale Höhenänderung des Sprechers präzise zu erfassen. In der Praxis kann ein Sprecher während einer Konferenz oder einem Livestream aufstehen, herumgehen oder an einer Whiteboard schreiben, so dass Höhenänderungen normal sind. Das Wave AI Rundumaufnahmemikrofon nutzt innovativ die Fähigkeit zur vertikalen Schallquellenortung (Z - Achse - Ortung).

Zheng Jincong erklärte die Wichtigkeit der dreidimensionalen Mikrofonanordnung: "Da wir eine dreidimensionale Mikrofonanordnung haben, müssen wir auch in Z - Achsenrichtung die Schallquellenortung ermöglichen, da die meisten Produkte auf dem Markt nur eine zweidimensionale Schallquellenortung bieten. Unsere Lösung kann jedoch die vertikale Schallquellenortung bieten." In der Kombinationslösung von Wave und der Netzwerkkamera Link sorgt diese Fähigkeit für eine perfekte Koordination von Ton und Bild, d. h. "wenn Sie aufstehen, kann die Kamera auf dem Drehgestell Ihrem Gesang folgen. Ohne diese Schallquellenortung wüssten wir nicht, wie hoch Sie aufgestanden sind."

Diese vertikale Ortungsfähigkeit ist die Grundlage für eine hochpräzise Sprecherverfolgung. Sie kann die Veränderungen der Schallquelle in Echtzeit und dreidimensional abgleichen, um das Drehgestell oder die intelligente Kamera für eine gleichmäßige und genaue Bildanpassung anzusteuern, was die Flüssigkeit und die Präsenz von Fernkooperationen und professioneller Videoproduktion erheblich verbessert.

Zheng Jincong gab auch bekannt, dass vor der endgültigen Produktentwicklung etwa sechs Generationen von Prototypen nur in Bezug auf die Akustik verbessert wurden.

Die Entscheidung von Insta360, sich auf Innenraumkonferenzen und die professionelle Audio - Branche zu konzentrieren, ist ein strategisches Zeichen für die Erweiterung des Geschäftsfelds und die Ausweitung der Kernkompetenzen in der Bildverarbeitung. Yuan Yue, Chief Strategy Officer von Insta360, meint, dass die Kernlogik bei der Entwicklung von Outdoor - Produkten und Innenraumprodukten dieselbe ist: "Das Wichtigste ist, ob das produzierte Produkt für die Kunden einen Wert bietet und sie es kaufen möchten."

Tencent setzt seine langjährige Erfahrung in der Audio - Algorithmenentwicklung in Form einer reifen Lösung ein, um die Hardwareinnovation zu unterstützen und die technologische Umsetzung zu beschleunigen. Shang Shidong, Vizepräsident von Tencent Cloud und Direktor des Tianlai - Labors, sagte, dass das Ziel der Partnerschaft darin besteht, "die in den letzten 20 Jahren von Tencent gesammelten Algorithmenkenntnisse in eine Lösung zu transformieren" und diese mit der Hardware - Expertise von Insta360 zu verbinden, um gemeinsam Nutzwert für die Benutzer zu schaffen.