スマート シティ エキスポ世界会議で YUAN と共に生成 AI の未来を探る

バルセロナで開催されるスマートシティエキスポ世界会議では、ビデオ技術がスマートシティ開発の核となる原動力として実演されています。ビジョンAIとビジュアルAIエージェントは、都市の安全性を高めるだけでなく、運用効率も大幅に向上させます。この展示会では、ビデオ技術のリーダーであるYUANが、ビデ​​オキャプチャとAIの統合における最新の進歩を展示し、スマートシティの未来の理想的な青写真を描きます。

多様なビデオ ソースの課題とブレークスルー

スマート シティのビデオ アプリケーションは、従来の IP カメラと NVR 録画の基本をはるかに超えています。テクノロジーの進歩により、都市ではより多様なリアルタイム ビデオ ソースが必要になっています。YUAN 氏は、次世代ネットワーク カメラが普及しているものの、TVI、SDI、CVBS カメラなどのコスト効率の高いオプションがシステム インテグレーターの主な選択肢であり続けていると指摘しています。さらに、無人航空機 (UAV) 市場の MIPI カメラと GMSL カメラは、新興アプリケーションで徐々に主流になりつつあります。このような多様なビデオ ソースは都市のデータ サポートを充実させますが、ビデオ統合の複雑さも増し、AI アプリケーションの融合に新たな課題をもたらします。

ハードウェア イノベーション : エッジにおける NVIDIA アクセラレーテッド コンピューティングのパワー

展示会で紹介された、エッジ AI およびロボティクス向けの NVIDIA Jetson Orin プラットフォームを搭載した YUAN のソリューションは、スマート シティのビデオ処理を新たな高みに引き上げます。Air シリーズは、名刺サイズのボードに NVIDIA Jetson Orin NX モジュールを統合し、IP、TVI、SDI、GMSL、HDMI などをサポートする 12 種類のビデオ キャプチャ モジュールを備えています。お客様は、現場のニーズに基づいてビデオ入力モジュールを柔軟に交換できるため、リアルタイムで効率的なビデオ処理が可能になります。このイノベーションにより、Air シリーズは 2024 Computex Golden Best Award を獲得しました。このスマート シティ展示会で、YUAN はクラス最高のデザインを披露できることを誇りに思っています。

さらに、YUAN の Near、Edge、Air 製品ラインは、20 TOPS から 1700 TOPS までの包括的なエッジ コンピューティング ソリューションを提供し、NVIDIA Jetson および NVIDIA IGX プラットフォームにわたるオプションにより、アプリケーション シナリオ全体の多様なコンピューティング ニーズに対応します。

AI イノベーション : 高解像度、低遅延の NVIDIA Jetson Orin エッジ コンピューティング ベース カメラ

スマート シティにおける高性能ビデオ機器の需要を満たすため、YUAN は Sony と連携して、NVIDIA Jetson Orin NX モジュールと統合された 25 倍光学ズームの 4K60 カメラを発売しました。4K60 解像度、HDR、IP66 防水機能を備えたこのカメラは、屋外環境でも耐久性と信頼性に優れています。さらに、組み込みの RDMA テクノロジと NVIDIA CUDA 搭載のビデオ処理機能により、遅延が効果的に短縮されます。 Jetson Orin NX を搭載したカメラにより、ソフトウェア開発者は 100 TOPS カメラ側で AI 分析を直接展開できるようになり、リアルタイム処理の効率が向上し、可能なアプリケーション シナリオが拡大します。

ジェネレーティブ AI : スマート NVR とカメラ アプリケーションの新時代を変革

ジェネレーティブ AI は、スマート NVR とカメラの利用方法を再定義しています。NVIDIA Jetson Orin は、マルチモーダル ジェネレーティブ AI 機能をスマート シティにもたらします。ビジュアル言語モデル (VLM) によってサポートされるこのプラットフォームは、音声、テキスト、ビデオなどのさまざまな入力を統合し、スマート シティの正確なシーンの説明と動作認識を提供します。この展示会では、YUAN の SmartVDO NVR ソフトウェアが、DVR および VMS システムでのジェネレーティブ AI の適用を実演し、スマート セキュリティのための先進的なソリューションを提供します。

インテリジェントな理解: VILA/CLIP テクノロジーと NVR の統合

YUAN の AI チームは、NVIDIA Metropolis のビジョン AI 機能を使用して、VLM VILA テクノロジーを NVIDIA Jetson AGX Orin のネットワーク ビデオ レコーダー ソフトウェアと統合し、NVR システムが危険な安全状況でのビデオ キャプションなど、リアルタイムのビデオ コンテンツを解釈できるようにしました。さらに、YUAN はビデオ ベクトル化に CLIP バックエンドのモデルを適用し、データを VectorDB に保存しました。これにより、ビデオ管理者は特定の基準に基づいて瞬時に検索を実行できるようになり、NVR 機能の従来の認識が一変しました。

スマートなインタラクション: Whisper/Llama の画期的なアプリケーション

ビデオ認識以外にも、YUAN は Whisper 音声テクノロジーをさらに統合し、NVR システムに音声インタラクション機能を追加して、キーボード操作の必要性をなくし、NVR システムをよりユーザーフレンドリーにしています。さらに、Llama はインテリジェントなセマンティック検索機能を追加し、従来のキーワード検索モデルに取って代わり、ビデオ管理インタラクションをより効率的で便利なものにしています。

結論 : スマート シティ ビデオ テクノロジーの新たな章を開く

生成 AI テクノロジーとプロのビデオ専門知識およびハードウェア設計を組み合わせることで、YUAN はスマート シティ ビデオ処理に革新的なモデルをもたらします。これらの革新的なソリューションは、さまざまなビデオ ソースの課題に対処するだけでなく、リアルタイム分析、音声対話、インテリジェント検索における効率的なエクスペリエンスも提供します。NVIDIA Jetson Orin プラットフォームのサポートにより、YUAN はスマート シティのビデオ アプリケーションを再定義し、都市開発のためのよりスマートで効率的なビデオ ソリューションを提供しています。