Hand Wave

Meer informatie is te vinden op handwave.sh. Er is ook een demo beschikbaar op YouTube.

Installatie

Vereisten

Om het project te installeren, zijn de volgende tools nodig:

  • pnpm 10.33+
  • Node 22+
  • Python 3.11/3.12
  • uv
  • moon

Stappenplan

Voer de volgende commando's uit om de omgeving in te richten:

cp .env.example .env
pnpm install
uv sync --project apps/inference

Let op: Vergeet niet om VITEINFERENCEURL in het .env-bestand in te stellen.

Ontwikkeling

Om de ontwikkelomgeving te starten, gebruik je het volgende commando:

pnpm dev

Onderzoeksverwijzingen

Dit project is gebaseerd op of maakt gebruik van de volgende bronnen en onderzoek:

  • Questure Tracker
  • MiCT-RANet for ASL Fingerspelling
  • A Two-Stream Neural Network for Pose-Based Handshape Recognition in American Sign Language
  • Mixed 3D/2D Convolutional Tube for Human Action Recognition
  • Fingerspelling Recognition in the Wild with Iterative Visual Attention
  • FSBoard: Over 3 million characters of ASL fingerspelling collected via smartphones