Изследователите използваха изкуствен интелект, за да превърнат обикновените смарт часовници в устройство за точно измерване на движенията на ръката

Нови часове‑помощници от Корнелския университет и KAIST

Ученици от Корнелския университет (САЩ) и Кореянския институт за напреднали технологии (KAIST) създадоха системата WatchHand, която превръща обичайните смарт часове в пълноценен тракер на движенията на ръката. Системата използва само вграден динамик и микрофон на часовете, без нужда от външни сензори.

Как работи WatchHand
1. Акустичен сигнал – часовете излъчват неслышими звукови вълни.
2. Ехо‑получаване – микрофонът записва отражените сигнали и формира ехо‑профил.
3. Обработка на устройството – локален алгоритъм за машинно обучение преобразува профила в координати на ръката по три оси.

Така системата обработва данните директно на часовете, което осигурява поверителност и минимално закъснение.

Предимства
Показател WatchHand | Традиционни решения
Не изисква външни сензори ✔ ❌ (камери, IMU‑сенсори)
Подходящ за ежедневна употреба ✔ ❌
Мащабируемост до милиони устройства ✔ ❌
Локална обработка на данните ✔ ❌

Тестване
- Участници – 40 души.
- Данни – около 36 часа жестове, събрани в четири независими експеримента.
- Платформи – няколко модели смарт часове.
- Сценарии – различни позиции на ръката и шумни условия.

Резултатите показаха надеждно проследяване на движенията на пръстите и въртенето на китката дори в трудни условия.

Перспективи за приложение
* Управление на компютър и приложения чрез жестове.
* Взаимодействие с AR/VR системи.
* Помощ на хора с ограничена подвижност или реч.

Пасажер KAIST Дживан Ким отбелязва: „Ако устройството има динамик и микрофон, нашият подход е приложим“.

Ограничения и бъдеще
* В момента работи само на Android устройства.
* Точността намалява при движение на потребителя (например по време на ходене).

Екипът активно разработва подобрения за мобилни сценарии.

Резултатите от изследването ще бъдат представени на конференцията ACM CHI 2026 за човешкия фактор в компютърните системи.

Ключова идея

Доцентът от Корнелския университет Ченг Чжан обобщава: „WatchHand демонстрира как простото софтуерно обновление може да превърне милиони съществуващи часове в интелигентни платформи за проследяване на поведение. Това отваря път към нови начини за взаимодействие с цифровите устройства без клавиатури и мишки.“