自然言語処理 - SmartVision デモ アプリケーション
作成者: Xilinx, Inc
この自然言語処理 (NLP) SmartVisionアプリケーションは、ユーザーが話すキーワードを常時検出し、キーワードに基づいてビジョン タスクを動的に切り替えたり、表示プロパティを変更します。
特長:
- USB マイクからライブ音声をキャプチャ
- AR1335 カメラ センサーから映像をキャプチャ
- キーワード スポッティング (KWS)、およびキーワードによるビジョン タスクの動的切り替え（顔検出／物体検出／ナンバープレート検出)
- HDMI または DisplayPort 出力
- ハードウェア デザインを含む完全アプリケーション
必要なハードウェア:
その他のツールおよびリソース
よくある質問 (FAQ)
いいえ、FPGA の設計経験は必要ありません。
このアプリケーションは、AMD が無償で提供しています。
AMD の NLP-SmartVision アプリケーションは、onsemi 社の AR1335 イメージ センサーを使用して検証しています。MIPI センサーを追加する場合は、デザインとアプリケーションを更新する必要があります。
このアプリケーションは、ほとんどの USB マイクで動作します。
NLP-SmartVision アプリケーションは、あらかじめ設定されている 10 個のキーワードに対してのみ機能します。独自キーワードをモデルに学習させたり、公開されているアプリのソース コードを使用してアプリケーションに変更を加えることも可能です。
主な資料
アダプティブ コンピューティングを使用して AI 搭載のエッジ ソリューションを加速
適応型 SOM が次世代エッジ アプリケーションに最適な理由とその利用方法について説明しています。スマート ビジョン プロバイダーが、この適応型 SOM を利用することでのみ実現できる性能、柔軟性、および迅速な開発のメリットについても解説しています。
ロボティクス分野におけるアダプティブ コンピューティング
ロボットの需要は急速に高まっています。人間と一緒に働くことができる安心安全なロボットを作ることは簡単ではありません。これらを連携させるには、より高度な技術が必要です。また機械学習や人工知能の導入によって、さらに高い処理能力が求められるようになり複合的な課題に対応しなければなりません。ロボット開発者たちは、拡張性のある適応型プラットフォーム上にセーフティ/セキュリティ機能があらかじめ統合され、低レイテンシ、確定性、多軸制御をサポートするアダプティブ コンピューティング プラットフォームに注目し始めています。詳細は eBook をご覧ください。