Araştırmacılar, normal akıllı saatleri el hareketlerinin hassas ölçümü için bir cihaz haline getirmek amacıyla yapay zekayı kullandı

Yeni saat‑yardımcıları Cornell Üniversitesi ve KAIST tarafından

Cornell Üniversitesi (ABD) ve Kore İleri Teknoloji Enstitüsü (KAIST) bilim insanları, WatchHand adlı sistemi geliştirdi; bu sistem sıradan akıllı saatleri tam bir el hareketi izleyiciye dönüştürüyor. Sistem yalnızca saatin yerleşik hoparlörünü ve mikrofonunu kullanır, harici sensöre ihtiyaç duymaz.

WatchHand nasıl çalışıyor
1. Akustik sinyal – Saat, duyulamaz ses dalgaları yayar.
2. Eko‑alım – Mikrofon yansıyan sinyalleri kaydeder ve eko profili oluşturur.
3. Cihaz içi işleme – Yerel olarak çalışan makine öğrenimi algoritması, profili elin üç eksenli koordinatlarına dönüştürür.

Bu sayede veri doğrudan saatte işlenir; gizlilik sağlanır ve gecikme minimuma indirilir.

Avantajlar
WatchHand göstergesi Geleneksel çözümler Harici sensör gerektirmez ✔ ❌ (kameralar, IMU‑sensörleri) Günlük kullanım için uygundur ✔ ❌ Milyonlarca cihaza ölçeklenebilir ✔ ❌ Veri yerel işleme ✔ ❌

Test
- Katılımcılar – 40 kişi.
- Veriler – dört bağımsız deneyde toplanan yaklaşık 36 saatlik jest verisi.
- Platformlar – birkaç akıllı saat modeli.
- Senaryolar – farklı el pozisyonları ve gürültülü ortamlar.

Sonuçlar, bileşik koşullarda bile parmak hareketleri ve bilek dönüşünü güvenilir şekilde izlediğini gösterdi.

Uygulama perspektifleri
* Jestlerle bilgisayar ve uygulamaları kontrol etmek.
* AR/VR sistemleriyle etkileşim.
* Sınırlı hareketlilik veya konuşma yeteneği olan kişilere yardım.

KAIST lisansüstü öğrencisi Jivan Kim şöyle diyor: “Cihazda hoparlör ve mikrofon varsa, yaklaşımımız uygulanabilir.”

Kısıtlamalar ve gelecek
* Şu anda yalnızca Android cihazlarda çalışıyor.
* Kullanıcının hareketi sırasında (örneğin yürürken) doğruluk düşer.

Ekibimiz mobil senaryolar için geliştirmeler üzerinde aktif olarak çalışıyor.

Araştırma sonuçları, 2026 ACM CHI Konferansı’nda insan faktörü üzerine sunulacak.

Ana fikir

Cornell Üniversitesi öğretim üyesi Cheng Zhang şöyle özetledi: “WatchHand, basit bir yazılım güncellemesinin milyonlarca mevcut saati davranış izleme için akıllı platformlara dönüştürebileceğini gösteriyor. Bu, klavye ve fare olmadan dijital cihazlarla etkileşim kurmanın yeni yollarını açıyor.”