Robotik Platformlar için Çok Modlu Görü Görüntüleme Modülü

[Ahmet Ö.]

## Robotik Platformlar için Çok Modlu Görü Görüntüleme Modülü

STMicroelectronics ile Leopard Imaging, robotik görüş ve fiziksel yapay zeka uygulamalarını desteklemek amacıyla görüntü işleme, derinlik algılama ve hareket algısını bir araya getiren, NVIDIA Jetson uyumlu çok modlu bir görsel modül geliştirdi.

Bu yeni modül, insan benzeri ve ileri robotlarda kullanılmak üzere tasarlanmış olup, kompakt ve düşük güç tüketimli yapısıyla sınırda yapay zeka sistemlerine uygun bir mimari sunar. 2D görüntüleme, 3D derinlik algılama ve atalet hareket takibini senkronize bir veri akışı halinde birleştirerek robotların çevrelerini daha iyi anlamalarını sağlar.

### Çok Modlu Görüntüleme Modülünün Özellikleri

• 5,1 megapiksel VB1940 RGB-IR görüntü sensörü, rulo ve global perde modlarını destekleyerek hızlı hareket eden nesnelerde bozulma olmadan kaliteli görüntü sağlar
• BrightSense ailesinden V943 sensör varyantı, monokrom veya RGB-IR konfigürasyonlarıyla endüstriyel ve tüketici uygulamalarına uygun
• 6 eksenli LSM6DSV16X atalet ölçüm birimi (IMU), gömülü makine öğrenme çekirdeği ile hareket takibini sağlar
• Düşük güçlü sensör füzyon teknolojisi (SFLP) ve elektrostatik Qvar algılama özellikleri kullanıcı arayüzü ve etkileşim temelli robotik uygulamalar için destek sunar
• VL53L9CX doğrudan zaman uçuşlu (dToF) LiDAR modülü, 9 metreye kadar derinlik algılaması yapmakta ve 54×42 bölge çözünürlüğü ile hassas uzamsal haritalama gerçekleştirir
• 55° × 42° görüş alanı ve yaklaşık 1° açısal çözünürlükle küçük nesnelerin tespiti mümkün
• 100 kare/saniye hızına kadar 3D sahne yeniden yapılandırma desteği

### NVIDIA Robotics Ekosistemine Tam Uyum

Modül, NVIDIA Holoscan Sensor Bridge sayesinde Ethernet üzerinden çok gigabit veri aktarımını destekler ve yüksek bant genişliğine sahip sensör verilerinin gerçek zamanlı olarak Jetson platformlarına aktarılmasını sağlar. NVIDIA Isaac platformu ile tam uyumlu olan modül, yapay zeka modelleri, simülasyon araçları ve geliştirme kütüphaneleri ile kolay entegrasyon ve hızlı geliştirme döngüleri sunar.

### Robotikte Fiziksel Yapay Zeka ve Sensör Füzyonu

Gerçek zamanlı yüksek bant genişlikli veri transferi ve senkronize çoklu sensör kullanımı, robotların çevresel verileri anlık işlemesini mümkün kılar. Bu da yapay zekanın algılama, karar verme ve harekete geçme süreçlerini düşük gecikme süreleriyle gerçekleştirmesini sağlar. Sensörlerin NVIDIA ekosisteminde standartlaştırılmış entegrasyonu, geliştirme karmaşıklığını azaltırken robotik platformlarda ölçeklenebilir dağıtımı destekler.

Bu gelişme, özerk ve yarı özerk makinelerde birlikte çalışabilirlik ve veri tutarlılığına odaklanan, sensör ve işlem platformlarının sıkı entegrasyonuna yönelik sektörel eğilimi yansıtır.