Fingerspelling.xyz

Kreatif stüdyo Hello Monday, insanların işaret dilini öğrenmesini kolaylaştırmak için el pozisyonlarını gerçek zamanlı olarak öğreten ve düzelten bir uygulama tasarladı.

Popüler dil öğrenme uygulaması Duolingo'dan farklı olarak Fingerspelling.xyz, kullanıcının kelime öğrenme girişimlerini gerçek zamanlı olarak değerlendirebiliyor.

Uygulama, bir kişinin Amerikan İşaret Dili (ASL) alfabesinin el işaretlerini denerken doğruluğu kontrol etmek için web kamerasını kullanıyor. Doğru el işaretlerinin görüntüleri üzerinde eğitilmiş bir algoritma bunların doğruluğunu analiz ediyor.

Uygulama tarafından kullanılan teknoloji, okuma veya video izleme yoluyla işaret dili alfabesini öğrenmenin geleneksel yöntemlerinden daha ilgi çekici bir öğrenme deneyimi sunuyor.

Uygulamayı kullanırken doğru yazdığınız her işaret ve kelime için web kamerası aracılığıyla size gerçek zamanlı geri bildirim sağlamak için makine öğrenimi teknolojisinden yararlanılıyor.

ASL'de, özel isimler için veya bir kişi bir kelimenin işaretini bilmediğinde parmakla yazım kullanılıyor. Mor ve sarı bir ara yüzde, Fingerspelling.xyz, kullanıcıya bir dizi kelime ve her harf için gereken pozisyonu gösteren bir elin 3B modeli vererek başlıyor. Uygulama daha sonra kullanıcının girişimini analiz ediyor, doğru hizalamayı elde edene kadar geri bildirimde bulunuyor ve ardından seviyelerde ilerlemelerine izin veriyor.

Hello Monday, web kamerası verilerinin saklanmayacağını veya herhangi bir yere gönderilmediğini vaat ediyor. Stüdyo, özellikle işitme engelli çocukların ebeveynlerini hedef alıyor, böylece çocuklarını erken bir aşamada işaret diliyle tanıştırarak gelişimini teşvik edebiliyorlar.