IoT（モノのインターネット）は、身の回りのあらゆるモノをインテリジェントなデバイスに変え、実用的なデータを提供する技術です。しかし、従来の音声アシスタントやAIアシスタントは、ユーザーの意図を正しく理解するのが難しく、自然な会話をすることやリアルタイムの状況に応じた判断を下すことができませんでした。そのため、IoT を十分に活用できていないのが現状です。
そのような現状の課題解決に、会話型 AI が新たな可能性を切り開きます。最新の大規模言語モデル（LLM）を活用したマルチモーダル通信により、複雑なリクエストを理解し、自然な会話を行い、さらにはライブ映像を解析してアクションを実行することが可能になります。さらに、低遅延のリアルタイム通信技術を組み合わせることで、スマートホームや自動運転など、IoT による進化を加速させることができます。
Agora の 会話型 AI SDK は、自動化・通信・リアルタイムの意思決定 を進化させる画期的な技術です。
この 会話型 AI SDK は、OpenAI のリアルタイム API とシームレスに統合、GPT モデルを活用した音声対話や IoT 操作を簡単に実現できます。また、IoT SDK を活用することで、AI エージェントとの会話や、友人とのビデオ通話など、あらゆる IoT デバイスでスムーズなリアルタイム通信が可能になります。
本記事では、こうした技術がさまざまな業界でどのように活用されているのか、注目の事例を詳しく紹介し、IoT の未来がどのように変わっていくのか を探ります。
Ellieは、リアルタイムのビデオストリーミングと高度なAI技術を融合したAI搭載ベビーモニターを開発しています。さらに、Agoraの会話型AIを活用することで、より高度な機能を実現し、パーソナライズされたインタラクティブな体験を提供しています。
Ellieは、親が赤ちゃんの様子を簡単かつ安心して見守れることを重視しており、新米の親にも信頼できるAIベビーケア製品を届けることを目指しています。
Agoraを導入する前、EllieのAIベビーモニターは従来のP2P接続を使用してストリーミングを行っていました。しかし、この方式では特にインターネット環境が不安定な地域で、映像や音声の品質が低く、遅延が頻発するという課題がありました。また、リアルタイムでユーザーの体験品質（QoE）を測定する方法がなく、問題が発生しても迅速に対応することができませんでした。
リアルタイムのビデオとオーディオを常時ストリーミングし、赤ちゃんの泣き声や顔が覆われている状態を検出。さらに、睡眠パターンや動きを分析して、安全性を最大限に確保します。
赤ちゃんの睡眠の質、動き、重要なアラートなどの主要なイベントをまとめた毎日のレポートを作成。親が赤ちゃんの健康状態を一目で把握できるようにサポートします。
会話型AIを活用し、親の声をリアルタイムで再現。親が不在のときでも、赤ちゃんを優しくあやしたり、物語を語ったりすることができます。
「Agora のおかげで、当社の高度なリアルタイムAI機能をシームレスに拡張し、親御さんにこれまでにないベビーモニタリング体験を提供できるようになりました。」 ジョー・タム（Ellie共同創設者）
AIスマートトイは、インタラクティブなストーリーテリングと会話型AIを組み合わせることで、没入感があり、創造的で教育的な遊びを実現します。これにより、子ども一人ひとりに合わせた魅力的な遊び体験を提供します。
例えば、Curioのようなおもちゃは、安全な会話型AIを活用し、子どもと自然に会話しながら物語を語ります。一方、Mikoのようなスマートロボットトイは、子どもを楽しませながら教育し、遊びの中で学習をサポートします。さらに、学習の進捗を見守りながら、子どもの活動をガイドする機能も備えています。
また、Mikoはビデオ通話やリモート操作にも対応しており、親がどこにいても子どもとつながることができます。外出先や別の部屋からでも、学習の進捗を確認したり、会話を通じて関わったりできるため、親子のコミュニケーションがより深まります。
会話型AIを活用し、音声の再現やトーン、アクセントの調整を行うことで、子どもの好みや反応、さらには地域の方言にも適応。おもちゃが親の声で語るストーリーを常に進化させ、より親しみやすい体験を提供します。
会話型AIにより、おもちゃは子どもの感情ややり取りに応じて反応や動作を変化させることができます。これにより、子どもと一緒に成長するダイナミックな学習パートナーとして機能し、遊びながら学ぶ環境をサポートします。
「Agora の安全で高品質なビデオ通信を Miko に追加したことで、保護者のアプリへの関与が大幅に高まりました。」
Miko 共同創設者兼 CEO、Sneh Vaswani 氏
これまで受動的に記録するだけだったビデオフィードが、能動的にセキュリティを強化するツールへと進化しました。Agoraは、画像認識技術を活用してリアルタイムの映像を分析し、予測的な洞察を提供することで、既存の監視システムに高度な分析能力をもたらします。この革新的な技術により、カメラは単なる監視デバイスにとどまらず、学習・検出・対応を行う自ら判断して行動できるツールへと進化します。
Agoraの会話型AI SDKにより、疑わしい行動を即座に特定し、リアルタイムの物体認識と即時アラートを通じて盗難を防止できます。さらに、画像認識技術機能はセキュリティ用途を超え、以下のような活用が可能です。
会話型AIを統合することで、ユーザーは映像を手動で遡ることなく、簡単に必要な情報を取得できます。 例えば、「過去2日間で何人の人が私の家の前を通過しましたか？」と尋ねるだけで、即座に回答を得ることができます。
Agoraの会話型AI SDKにより、ビデオフィードは単なる監視ツールから、より高度でインテリジェントなセキュリティソリューションへと進化します。
自律走行車はスマートシティの未来を形作ります。会話型AIを搭載したAgoraの会話型AI SDKは、ロボタクシーなどの自律走行車を、都市のモビリティを向上させるパーソナライズされたライドシェアリング体験へと変えます。
Agoraの会話型AI SDKにより、乗客はナビゲーションのサポート、音楽の選択、乗車に関する質問などを複数の言語でシームレスにやり取りできます。また、リアルタイムの安全監視により、オペレーターは車両のパフォーマンスと乗客の安全を追跡できます。これにより、一人で旅行する子供や高齢の家族を遠隔で見守ることができ、親や介護者にとって大きな安心材料となります。さらに、渋滞や緊急事態などの複雑な状況では、オペレーターが車両を遠隔制御し、スムーズで安全な移動を確保できます。
Agoraの会話型AI SDKにより、乗客はナビゲーションのサポート、音楽の選択、乗車に関する質問などを複数の言語でシームレスにやり取りできます。
オペレーターが車両のパフォーマンスと乗客の安全を追跡できるようになります。これにより、一人で旅行する子供や高齢の家族を遠隔で見守ることができ、親や介護者に安心を提供します。
交通渋滞や緊急事態などの複雑な状況では、オペレーターが車両を遠隔操作し、スムーズで安全な走行を確保できます。
Agoraの会話型AI SDKにより、自律走行車はより安全で快適な移動手段へと進化し、未来のスマートシティを支える重要な要素となります。
カメラとオーディオを搭載した芝刈り機は、リアルタイムのビデオフィード、画像認識技術、会話型AIによって強化され、適応型で予測的な造園メンテナンスが可能になります。
たとえば、ロボット芝刈り機は継続的に学習し、屋外環境に適応しながら最適な芝刈りパターンを作成し、障害物が発生する前に予測します。このインテリジェントな技術により、複雑な地形でもスムーズな操作と効率的な作業が可能になります。さらに、ロボット芝刈り機はさまざまな種類の芝生とその独自の成長パターンを認識でき、水やりや種まきが必要なエリアをユーザーに警告し、専用アプリを通じてリアルタイムで調整できます。
芝刈り機はさまざまな芝の種類と成長パターンを識別できます。散水や再播種が必要なエリアをユーザーに通知し、専用アプリを介してリアルタイムで調整可能です。
ペットや子供、その他の障害物が近くにいる場合、AIが芝刈り機を一時停止し、安全を確保します。ユーザーには「芝刈り経路に障害物があります。障害物がなくなったら再開します。」といった音声アラートが送信されます。
「裏庭の芝刈りを開始」「花壇を避けてください」などの簡単な音声コマンドで芝刈り機を操作でき、ハンズフリーでの管理が可能です。
芝刈り機は庭師のようにリアルタイムで情報を提供し、「芝生に水をやる必要がありますか？」といった質問に答えたり、「裏庭エリアは完了、前庭に移動中」といった進捗レポートを提供します。
IoTとAIの組み合わせにより、業界全体に新たな可能性が開かれています。セキュリティシステムから自律走行車まで、あらゆる分野で変革が進んでいます。
AgoraのAI駆動型IoTソリューションは、OpenAIのRealtime APIとのシームレスな統合により、自動化と通信を強化し、テクノロジーとの関わり方の未来を形作っています。
安全性の向上、エクスペリエンスのパーソナライズ、運用の最適化など、つながる世界の可能性は無限であり、Agoraはその最先端にいます。
未来はよりスマートに、よりつながり、イノベーションによって推進されていきます。
※この投稿は、Agoraの日本代理店であるブイキューブが、Agoraブログを翻訳した記事です。