WebRTCで音声ミックス

ブイキューブは、自社製品の認知拡大と技術的な情報提供を目的に定期的なセミナーのライブ配信を行っていますが、同一内容のセミナーを複数回実施しているケースもあり、効率化を検討しました。 解決策として事前収録したコンテンツを用いて、擬似ライブ配信を実施してみました。 効率化は達成したものの、自宅収録に伴う騒音侵入や、声量の不均一性、取り直しの必要性など新たな課題が生じました。 盲点だったのは日をまたいで部分的な取り直しをする際、散髪をしてしまったら前後のつながりが不自然になるという点でした。 これらの問題を克服するため、生成AIアバター動画生成技術の採用を検討しました。 バーチャルヒューマンを用いることで、物理的な制約を超え、高品質で一貫したコンテンツ制作が可能になり、効率的な配信と視聴者との新しい形のエンゲージメントを実現することが見込まれます。

※この投稿は、Agoraの日本総代理店であるブイキューブが、Agoraブログを翻訳した記事です。 この記事では、 Next.js Webアプリで Agora Web UIKitを使用する方法について説明します。 サーバー側レンダリング (SSR) または静的サイト生成 (SSG)を使用する場合、動的インポートを使用して、Next.jsにAgora SDKを(“window is not defined”エラーが発生することなく) インポートします。

※2020年の記事です。 agora.ioのSDKでは独自プロトコルで映像を配信していますが、既存のRTMPサーバーへのpushも並行して配信できます。 OBSスタジオやWireCastのような配信アプリを作成する事が可能です。

　コロナ禍の影響もあって、テレワークなどの映像・音声込みネット・コミュニケーションが大きく進展した。またオンラインエクササイズ教室やライブコマースなど、映像・音声込みビジネスも盛んだ。しかし実際、映像・音声込みのシステムを構築しようとすると、遅延、低品質、参加人数による影響など課題は多い。本講演では、そんな悩みを一気に解決できるPaaSを紹介する。Agoraは米国生まれの映像・音声向けのSDKで、わずか数行で実装が可能。国内取扱窓口のブイキューブ社によれば導入企業がコロナ禍1年間で約6倍と大きく成長している。デブサミではその特徴やメリットなどが紹介された。 ※CodeZine（2022/04/11）からの転載です。

Agoraの導入事例でメタバースでの利用が増えてきました。メタバースのシステムを支える技術としては映像・音声の送受信、3D環境の構築、ARやVR、NFT、IoT等が考えられます。要素としてはクライアントアプリ、ユーザー管理サーバー、コンテンツ管理サーバーがあげられます。 この記事ではUnityでのメタバースアプリケーションの音声通話・映像配信部分について解説します。