# OmniHOI, insan eli videolarını robot hareketlerine dönüştürüyor

> Araştırma sistemi, insanların nesneleri tuttuğu tek kameralı videolardan robot eller için hareket yörüngeleri çıkarıyor. Araştırmacılar, önceki aktarım yöntemlerine kıyasla daha yüksek başarı oranları bildirdi.

Oossa · 2026-10-09 · https://oossa.com/tr/omnihoi-turns-human-hand-videos-into-robot-motions

Olay tarihi: 2026-10-07

Bir araştırma ekibi, insanların nesneleri kullandığı sıradan tek kameralı videoları becerikli robot eller için hareket yörüngelerine dönüştüren OmniHOI adlı sistemi tanıttı. Çalışma, pratik bir soruna çözüm arıyor: Videoda el yalnızca tek açıdan görülüyor ve bu hareketi doğrudan robota aktarmak, robotun nesneyi elinde tutamamasına yol açabiliyor.

Araştırmacılar, OmniHOI’nin 60 video klibinin 53’ünde başarılı olduğunu; test ettikleri en iyi önceki video-robot aktarım sisteminin ise %28 başarı sağladığını bildirdi. Ayrı bir test grubunda, hareket yakalama verilerinden alınan 150 yörüngeyi, 6 ila 22 serbestlik derecesine (bir elin kaç farklı şekilde hareket edebildiğinin ölçüsü) sahip beş robot elin her birine aktardılar. Başarı oranları %39 ile %89 arasında değişirken, önceki aktarım yöntemlerinde bu oran en fazla %31 oldu.

## Sistem nasıl çalışıyor?

OmniHOI üç aşamadan oluşuyor. Önce videodaki ipuçlarından el ve nesnenin hareketini yeniden oluşturuyor. Ardından hareketi, robot elin nesneyle temasına uyacak şekilde düzenliyor ve son olarak, ortaya çıkan hareketin dinamikleri daha iyi hesaba katması için fizik simülasyonunda iyileştiriyor.

Makaleye göre elde edilen yörüngeler, çeşitli görevlerde iki kollu gerçek bir robotta da çalıştırıldı. Ancak özette robotun adı verilmiyor ve bu gerçek robot testlerinin başarı oranları açıklanmıyor. Bu nedenle yukarıda bildirilen yüzdeler, gerçek dünyadaki kullanım sonuçları olarak değerlendirilmemeli. Çalışma bir araştırma makalesi; özette sistemin veya kodun kamuya açık olup olmadığı belirtilmiyor.

## Sonuçlar ne gösteriyor?

Sonuçlar, tek kameralı insan videolarının robot ellere yararlı örnekler sunabileceğine işaret ediyor; bunun için temiz hareket yakalama verilerine ya da göreve özel pekiştirmeli öğrenme eğitimine gerek olmayabilir. Araştırmacıların test sonuçları makalenin özetinde aktarılıyor; özette bağımsız bir doğrulamadan söz edilmiyor.

## Gerçekler

- OmniHOI, 7 Ekim 2026'da arXiv'e gönderildi.
- Araştırmacılar, tek kameralı 60 video klip üzerinde %53 başarı bildirdi. Önceki video-robot aktarım sistemlerinin en iyisi %28 başarı sağladı.
- Beş robot elin her birine aktarılan 150 hareket yakalama yörüngesinde başarı oranları %39 ile %89 arasında değişti; önceki aktarım yöntemleri en fazla %31'e ulaştı.
- Test edilen beş robot el 6 ila 22 serbestlik derecesine sahipti.

## Neden önemli

Robotik ekipleri için bu sonuçlar, nesneleri tutan insanların videolarını hareket yakalama yörüngelerine başvurmak yerine robot el örneklerine dönüştürmenin olası bir yolunu gösteriyor. Ancak özet, sistemin bildirilen testlerin dışında ne kadar iyi çalıştığını veya diğer ekiplerin araçlara erişip erişemeyeceğini ortaya koymuyor.

## Kaynaklar ve referanslar

1. [OmniHOI: Dexterous Hand-Object Interaction from Monocular Human Video](https://arxiv.org/abs/2610.10855) – arXiv cs.RO, 2026-10-09

Son güncelleme: 2026-10-09