エネルギー効率の高い設計とスケーラビリティによるエッジAIコンピューティングの最適化:NVIDIA Jetsonコンピュータ

Jetsonとは?主な設計上の特徴は?

NVIDIA Jetsonモジュールは、エッジデバイスでAIコンピューティングを加速するように設計された組み込みコンピューティングプラットフォームのファミリーです。これらのモジュールは、コンパクトでエネルギー効率が高く、AIおよび機械学習ワークロードの実行専用に設計された強力なGPUを搭載しています。Jetsonプラットフォームは、ロボット工学、ドローン、自動運転車、スマートカメラ、その他さまざまなエッジデバイスのアプリケーションで広く使用されています。

NVIDIAはなぜJetsonを開発したのか、そしてJetsonが重要な理由とは?

NVIDIAは、AI機能を備えたエッジコンピューティングソリューションの需要の高まりに対応するため、Jetsonモジュールを開発しています。NVIDIAがJetsonモジュールの開発に投資する主な理由は以下の通りです。

  • エッジコンピューティングのトレンド:IoT(モノのインターネット)デバイスの普及とエッジコンピューティングへのトレンドにより、データをローカルで処理できる組み込みシステムの必要性が高まっています。Jetsonモジュールは、エッジでAI推論を実行するための並列コンピューティング機能を提供し、デバイスがクラウドベースの処理に依存することなくリアルタイムの意思決定を行うことを可能にします。
  • AIおよび機械学習の加速:ディープラーニング技術の登場により、AIおよび機械学習は現代社会で重要な役割を果たすようになっています。Jetsonモジュールは、AIおよびMLワークロード向けに最適化されており、ニューラルネットワーク計算を加速するように設計されたCUDAコアを備えた強力なGPUをモジュール上に搭載しています。これにより、エッジデバイスは画像認識、自然言語処理、物体検出などの複雑なタスクを効率的に実行できます。
  • コンパクトでエネルギー効率の高い設計:以前、顧客はIntelのAIエッジコンピューティングソリューションを求めていました。IntelプロセッサとNVIDIA GPUを搭載したX86産業用コンピュータは、AIコンピューティングに十分な性能を持っていました。しかし、これらの産業用コンピュータは、コンパクトさと電力効率の点で限界があり、GPUのためにファンと広いスペースを必要とし、消費電力も高かったため、過酷な産業環境でのアプリケーションは限られていました。その後、Jetsonがより適切なソリューションとして登場しました。 Jetsonモジュールはこれらの問題を解決するように設計されており、コンパクトなサイズとエネルギー効率の高い性能により、スペースと電力の制約があるデバイスへの展開に適しています。Jetsonモジュールの消費電力はNVIDIA GPUよりもはるかに低く、Jetson AGX Orinでは最大60Wであるのに対し、通常のGPUでは最小50W TDPであるため、Jetsonモジュールは熱管理のためのファンレス設計システムに適しています。堅牢なシャーシとファンレス設計により、NVIDIA Jetsonモジュールは過酷な環境での展開に対応しています。
  • 開発者向けエコシステム:NVIDIAは創業以来、GPUの背後にある技術に多大な投資を行ってきました。CUDA、Deep Learning Super Sampling、Ray Tracingといった画期的な技術に注力しています。NVIDIAは、Jetsonモジュール向けの包括的なソフトウェア開発キット(SDK)とライブラリ、および一般的なAIフレームワークのサポートを提供しています。このエコシステムは開発者向けであり、ソフトウェア開発者がJetsonを搭載したデバイス向けのAIアプリケーションを簡単に作成および最適化できるようにします。

Jetsonモジュールの理解

主な設計上の特徴:

NVIDIA Jetsonは、GPU、CPU、メモリ、電源管理、高速インターフェースなどを含む完全なSystem on Module(SOM)です。幅広い性能、電力効率、フォームファクタで提供されており、あらゆる業界の顧客に利用されています(出典:NVIDIA)。

Jetsonモジュールのラインナップ:

Jetson AGX Orinモジュール

    Jetson AGX Orinモジュールは、15Wから60Wの間で設定可能な電力で最大275 TOPSのAI性能を提供します。これはJetson Orinラインナップのフラッグシップモデルであり、最高の性能と機能を提供します。自動運転車、ロボット工学、産業オートメーション、スマートシティなどの要求の厳しいAIアプリケーション向けに設計されています。AGX Orinモジュールは、リアルタイムAI推論、センサーフュージョン、高性能コンピューティングを必要とするアプリケーションに適した強力な処理能力を提供します。

    Jetson Orin NXモジュール

      Jetson Orin NXモジュールは、最小のJetsonフォームファクタで最大100 TOPSのAI性能を提供し、電力は10Wから25Wの間で設定可能です。ミッドレンジのオプションとして位置付けられているOrin NXモデルは、性能、電力効率、コスト効率のバランスを提供します。スマートカメラ、ドローン、インテリジェント家電、組み込みAIシステムなど、幅広いAIエッジコンピューティングアプリケーションに適しています。Orin NXモジュールは、AGXモジュールと比較してコンパクトでコスト効率が高いながらも、かなりの処理能力を提供します。

      Jetson Orin Nanoモジュール

        Jetson Orin Nanoシリーズモジュールは、最小のJetsonフォームファクタで最大40 TOPSのAI性能を提供し、電力オプションは7Wから15Wです。Orin NanoはJetson Orinラインナップのエントリーレベルモデルであり、AI処理能力が必要とされながらも、低消費電力とコストが優先されるアプリケーションを対象としています。エッジAIデバイス、IoT(モノのインターネット)デバイス、およびスペース、電力、コストの制限が重要な要因となるその他の組み込みシステムに適しています。

        PremioのNVIDIA Jetson製品

        JCO-6000-ORN

        JCO-6000-ORN過酷なエッジ環境でリアルタイムAI計算のために最大275 TOPSのAI性能を提供する、Premioのフラッグシップ高性能エッジAI産業用コンピュータです。自動運転車、ロボット工学、産業オートメーション、ビデオ監視などの要求の厳しいAIアプリケーション向けに特別に設計されています。

        主な特徴:

        1. スケーラブルでモジュール式のEDGEBoost I/O
          2. 多様で柔軟なI/Oサポート
          EDGEBoost I/Oにより、JCO-6000-ORNは以下をサポートできます。
          • 最大8x USB 3専用帯域幅ポート
          • 最大5x 10GbEイーサネットポート
          • 最大9x 1GbEイーサネットポート
          • 最大4x PoE+/12x PoE+
          • 2x シリアルポート
          • 4K対応HDMI x 1

          3. GMSLカメラ用Mini-Fakraコネクタ x 8

          4. オプションのアウトオブバンド(OOB)モジュール

          JCO-3000-ORN

          JCO-3000-ORNは、PremioのミッドレンジエッジAI産業用コンピュータであり、過酷なエッジ環境での幅広いAIアプリケーション向けに最大100 TOPSのAI性能を提供します。NVIDIA Jetson Orin NXとOrin Nanoの両モジュールを活用し、効率的な電力消費でかなりのAI性能を提供します。

          • Orin NXは、10Wから25Wの間で設定可能な電力で最大100 TOPSのAI性能を提供し、要求の厳しいエッジアプリケーション向けに調整されています。
        • Orin Nanoは最大40 TOPSを実現し、7Wから15Wまでの電力オプションで高効率を追求しているため、小規模ながらAI集約型のアプリケーションに最適です。 
        • 主な機能: 

          1. 8ビット/16ビットの絶縁型DIOを含む、バランスの取れた固定I/Oをサポート
          2. オプションの帯域外(OOB)サポート 
          3. 4x RJ45経由で4x PoE+をサポート可能

          JCO-1000-ORN (2024年第3四半期に発売予定) 

          JCO-1000-ONN は、堅牢なエッジで、IIoT およびエッジ AI アプリケーション向けに最大 40 TOPS の AI パフォーマンスを提供するエントリーレベルのエッジ AI コンピュータです。  

          主な機能: 

          1. 超小型フォームファクター 
          2. 堅牢なファンレス設計
          3. バランスの取れたI/O 
          4. 低消費電力 

          Jetsonをどこに展開しますか?

          インテリジェント交通 

          • 自動運転車: Jetsonモジュールは、リアルタイムの認識、意思決定、制御に必要な処理能力を提供することで、自動運転車に電力を供給できます。 
          • 交通管理システム: Jetson OrinはAIアルゴリズムを使用して交通を分析し、流れを最適化し、事故をリアルタイムで検出します。特に鉄道の物体検出に役立ち、事故のリスクを大幅に軽減できます。道路状況を迅速に分析することで、リスクを軽減するための迅速な意思決定を行うことができます。 
          • フリート管理: ロジスティクスおよび運送会社では、NVIDIA Jetson Orinを搭載した分析機能により、ルートを最適化し、車両の状態を監視し、ドライバーの安全性を高めることができます。 

          産業オートメーション 

          • 品質管理: Jetson Orinは、産業用ロボットやスマートカメラに統合され、リアルタイムの品質管理および検査タスクを実行できます。その強力なAI機能により、製造プロセスにおける欠陥、異常、不規則性を特定し、製品の品質を確保し、無駄を削減します。 
          • 予知保全: Jetson Orinはセンサーデータをリアルタイムで分析し、機器の故障が発生する前に予測できます。この機能は、ダウンタイムを最小限に抑え、生産効率を最大化する予防保全のスケジュールを立てるのに役立ちます。例えば、振動、温度、その他の関連する指標を監視して、機械の摩耗や潜在的な誤作動の兆候を検出できます。 
          • AMRとAGV: Jetson Orinは、マテリアル輸送、在庫管理、施設監視などのさまざまな産業タスクで使用されるAGV(自動搬送車)、AMR(自律移動ロボット)、およびドローンに電力を供給できます。そのAI機能により、これらのロボットは複雑な環境をナビゲートし、物体を識別し、リアルタイムでインテリジェントな意思決定を行うことができ、産業環境における生産性と安全性を向上させます。 

          セキュリティ&監視 

          • 異常検知: Jetson Orinを搭載したセンサーとカメラは、セキュリティ侵害をリアルタイムで検知し、潜在的な脅威に迅速に対応できます。 
          • 自動アラート: Jetson Orinは異常を検知すると即座にアラートを生成し、警備員や法執行機関に迅速に通知します。 
          • 集中監視: Jetson Orinはコマンドセンターと統合され、集中監視を可能にし、リアルタイムの状況認識を提供し、セキュリティインシデントへの協調的な対応を促進します。 

          環境: 

          • 気象予測: Jetson Orinは気象データを処理して、山火事などの異常気象イベントを予測し、気候変動の影響を評価することで、早期警報と適応戦略を促進できます。 
          • 大気・水質監視: Jetson Orinモジュールはセンサーデータを分析して汚染レベルをリアルタイムで監視し、健康アラートを提供し、汚染インシデントを早期に検出します。 
          • 捜索救助任務: Jetson Orinモジュールを搭載したドローンは、火災現場などの危険な地域で活動し、リアルタイムのデータ処理と分析により捜索救助任務を支援し、対応効率と安全性を高めます。 

          農業: 

          • 作物監視: Jetson Orinは、ドローン、衛星、および畑に設置されたセンサーからのデータを分析して、作物の健康状態を監視し、病気を検出し、成長パターンを評価し、さらには作物の収量を予測できます。 
          • 自律型農業機器: Jetson Orinは、トラクター、収穫機、ロボットアームなどの自律型農業機器に電力を供給し、正確で効率的な農業作業を可能にします。GPSとセンサーと統合することで、Jetson Orinは正確な植え付け、施肥、収穫作業を可能にし、収量を最大化し、資源の使用量を最小限に抑えます。