Tek Bir Konsept Görselinden Simülasyona Hazır Robot Atölyesine

24 Ekim 2026 Okuma süresi 5 dakika
Paylaşmak

ChampionXperience ağırlamaktan mutluluk duyar. Pekka Varis'i Dell Pro Precision Elçisi ve NVIDIA Omniverse Elçisidönüştüren bir iş akışı olan Hermes 3D Agent'ı nasıl geliştirdiğini NVIDIA ve robotik için üretken 3D hakkında neler öğrendiğini paylaşacak.

Bir atölyede çalışacak bir robotun, gerçekleriyle karşılaşmadan çok önce raflar, kutular, kablolar ve el aletleri arasında eğitilmesi ve test edilmesi gerekir. Bu nesnelerin her birinin gerçek bir boyutu, kütlesi ve robotun dokunabileceği bir yüzeyi olmalıdır. Böyle bir sahneyi elle oluşturmak bir sanatçının haftalarını alır. Üretken yapay zeka aynı atölyeyi saniyeler içinde çizebilir, ancak bir resim bir sahne değildir: oluşturulan ağlar yüzer, birbirlerinin içinden geçer ve yanlış ölçekte ortaya çıkar.

Hermes 3D Agent, bu boşluğa verdiğim cevaptır. Aklınızdaki mekanın tek bir konsept görüntüsünü veriyorsunuz. O da her parçayı bağlam içinde oluşturuyor, gerçek dünya ölçeğine göre boyutlandırıyor, resmin yerleştirdiği yere konumlandırıyor ve fiziğin son sözü söylediği bir Isaac Sim sahnesi sunuyor. Hermes şu anda beta aşamasında. İşte adım adım nasıl çalıştığı ve üretken araçlarla simülasyon içeriği oluşturan herkes için geçerli olan dersler.

Solda: konsept görseli. Sağda: Hermes'in bu görselden yola çıkarak inşa ettiği Isaac Sim sahnesi, her parçası gerçek dünya ölçeğinde.

Adım adım rehber: tek bir raf, resimden fiziğe

  1. Herhangi bir şey harcamadan önce resmi okuyun. Hermes'in içindeki mantık modeli Claude, öncelikle konsept görselini inceler: raf tipi, her raf ve tahta, sayımlı ürün envanteri ve ön sıranın arkasındaki kutu sıraları gibi gizli yapılar. Ayrıca, desteksiz bir raf veya eğimli bir ray üzerindeki bir kutu gibi fiziğin reddedeceği şeyleri de işaretler. Tüm bunlar, daha sonraki her adımın kontrol edildiği sözleşme olan bir manifestoya kaydedilir.
  2. Algıla ve konumlandır.SAM 2.1, 4K tasarımı öğe maskelerine ayırırken, DINOv2 her nesneyi tanımlar. Ardından, sistem çerçeve kenarlarına bir kamera yerleştirir. Bu kamera, her pikseli 3 boyutlu uzayda bir ışına eşler. Sonuç olarak, Hermes her öğeyi pikselleriyle belirtilen rafa yerleştirebilir.
  3. Önce kütüphane, sonra üretim. Onaylanmış bir varlık her rafta yeniden kullanılır. Yalnızca eksik öğeler, tasarımın yakın plan görüntülerinden 3 boyutlu modellere dönüştürülerek oluşturulur. Her yeni varlığın anlamı veri olarak saklanır (ön eksen, gerçek boyut, nasıl monte edildiği), böylece yerleştirme asla tahmine dayalı olmaz.
  4. Jeneratörler ölçer, Blender inşa eder. Üretilen ağlar, iri, düzensiz nesneler için iyidir, ancak ince metal, düz levhalar ve okunabilir metin için kötüdür. Bu nedenle Hermes, üretilen çerçeveyi yalnızca bir cetvel olarak kullanır ve her profili, köşebenti, kapağı ve rafı Blender'da bir parça kitinden yeniden oluşturur. Etiketler, tuş takımı yazıları ve kapak camının altındaki LCD ekranlar gerçek geometridir, boyanmış dokular değildir.

Etiketler, düğmeler ve koruyucu camın altındaki LCD ekran gerçek Blender geometrisinden oluştuğu için yakın çekimlerde bile netliğini koruyor.

5. Fizik son sözü söylüyor. Nesneler desteklerinin yarım milimetre üzerine indiriliyor ve Isaac Sim'de PhysX ile yerleştiriliyor. Ardından Blender geçişi, her bir nesneyi temas kopmadan tasarımdaki yerine geri çekiyor. Hermes, kabloları Newton fizik motorunu kullanarak çubuklar olarak simüle ediyor. Örneğin, Tip 2 fişli on adet EV şarj kablosu 5,4 saniyede tel sepetlerine yerleşiyor. Uzunlukları %1'den daha az değişiyor.

Newton yöntemiyle simüle edilmiş ve tel sepetlerine yerleştirilmiş, Tip 2 fişli EV şarj kabloları.

6. Bir kişi bakmadan önce kontroller yapılır. Her yapı, yapı, envanter, temas, renk ve kaplama aşamalarından geçer ve iki puan alır: amaç (resim ile eşleşiyor mu?) ve fiziksel geçerlilik (ayakta duruyor mu?). Başarısız olan bir yapı, başka bir düzeltme turuna geri gönderilir; yalnızca geçen yapılar bir kişiye ulaşır.

Kendi iş akışınız için üç ders

  • Tasarım niyettir; fizik kanundur. Hangi öğelerin var olduğu, kaç tane olduğu ve hangi sırada oldukları görselden gelir. Duruş, temas ve ölçek simülasyondan gelir. Konsept çiziminde imkansız bir şey gösterildiğinde, sistem fiziksel doğruluğu korur ve herhangi bir sapmanın nedenini kaydeder.
  • Anlamı kod olarak değil, veri olarak saklayın. Bir varlığa bir kez yazılan ön eksen veya montaj tipi, gelecekteki her sahnede yönlendirme hatalarını düzeltir.
  • Her düzeltmeyi bir kontrol işlemine dönüştürün. Bir kişi bir hatayı işaretlediğinde, hataya neden olan adımı düzeltin ve otomatik bir kontrol ekleyin, böylece düzeltilen sorun düzeltilmiş olarak kalır.

Isaac Sim'de tamamlanmış bir Hermes rafı: Blender ile oluşturulmuş çerçeve, kütüphane araçları ve klasörleri, simüle edilmiş kablolar.

Çalışma istasyonunun önemi

Tüm bu geliştirme süreci, Dell Pro Max T2 kule NVIDIA RTX PRO 6000 Blackwell. 96 GB GPU belleği, Isaac Sim, Blender, algılama modelleri ve sahneyi aynı anda, araçlar arasında geçiş yapmadan çalıştırıyor. RTX 6000 Ada ekran kartına sahip ikinci bir iş istasyonu ise, paylaşılan bir iş kuyruğundan paralel olarak raflar oluşturuyor. Her şeyin yerel olması, yineleme hızını artırıyor. Bir kuralı değiştirdiğimde, sahneyi yeniden oluşturup birkaç dakika içinde Isaac Sim'de test edebiliyorum.

Açılış konuşması ekranında da aynı araç seti kullanıldı

Persona AI ile, NVIDIA Omniverse kullanarak insansı kaynak robotlarını bir tersanenin dijital ikizine entegre ettik. Robotlar Isaac Lab'te eğitildi. NVIDIA GTC 2026 açılış konuşması için sahneyi aynı Dell ve NVIDIA donanımında işledik.

Persona AI videosunu izleyin . Persona AI'nin öyküsünü , Dell Technologies makalesini veya Cineshare vaka çalışmasını okuyun .

Hermes'i deneyin

Atölye çalışmaları sadece başlangıç. Hermes 3D Agent, robotik simülasyon ve eğitim için birçok farklı ortam oluşturmanıza yardımcı olabilir. Ekibiniz simülasyon sahneleri, dijital ikizler veya robot eğitim ortamları oluşturuyorsa, Hermes beta programına başvurun ve ihtiyacınız olan alanın bir konsept görselini gönderin.

Pekka Varis
Abone
Bildirmek
misafir

0 Yorumlar
En Yaşlı
En Yeni En Çok Oy Alan
0
Düşüncelerinizi paylaşmanızı çok isterim, lütfen yorum yapın.x