수화 AI: ASL 학습의 혁명

목차

1. 창작자 소개
2. StrongASL.com의 수화 AI 도구
3. 수화 AI는 어떻게 만들어졌는가
4. 도구 사용 방법
5. 종합 ASL 사전
6. 현재의 한계와 향후 개발
7. 수화 AI 사용의 이점

창작자 소개

안녕하세요! 저는 이 수화 AI 도구를 만든 Paul Kelly입니다. CODA(성인 청각 장애 아동)이자 공인 수화 통역사로서 15년 동안 저는 청각 장애인 커뮤니티와 개인적인 관계가 깊고 ASL에 대해 깊은 이해를 갖고 있습니다. 이러한 배경과 언어 학습에 기술을 활용하려는 열정이 결합되어 ASL을 더욱 쉽게 접근하고 쉽게 배울 수 있는 혁신적인 솔루션을 개발하게 되었습니다.

AI 및 언어 교육에 대한 나의 경험은 ASL 학습 경험을 크게 향상시키는 도구를 만드는 데 중요한 역할을 했습니다. 내 작업 및 기타 프로젝트에 대한 자세한 내용을 보려면 다음을 방문하세요. paulbrucekelly.com. 또한 저는 더 발전된 AI 모델을 만들었습니다. signlanguageai.com 한 번에 여러 기호와 문자를 인식할 수 있습니다.

StrongASL.com의 수화 AI 도구

기본적으로 이 AI 도구는 고급 컴퓨터 비전 기술을 활용하여 비디오 프레임을 실시간으로 분석합니다. 이를 통해 ASL의 개별 문자와 단어를 인식하고 해석하여 사용자에게 서명에 대한 즉각적인 피드백을 제공할 수 있습니다. 몇 초 안에 AI는 입력을 처리하고 가장 가능성이 높은 상위 5개 징후를 예측하여 포괄적인 학습 경험을 제공합니다.

단일 기호 인식

이 도구는 2,000개 이상의 기호로 구성된 방대한 사전을 바탕으로 ASL의 개별 단어를 인식하고 해석할 수 있습니다. 이는 수행된 각 징후에 대해 가장 가능성이 높은 상위 5개 예측을 사용자에게 제공합니다.

단일 문자 인식

이 기능은 특히 ASL 알파벳에 초점을 맞춰 26개 문자를 모두 인식하고 손가락 철자 정확도에 대한 즉각적인 피드백을 제공합니다.

사전 페이지 인식

포괄적인 ASL 사전의 각 항목에는 자체 수화 인식 도구가 탑재되어 있어 사용자가 특정 수화를 연습하고 즉각적인 피드백을 받을 수 있습니다.

수화 AI는 어떻게 만들어졌는가

수화 AI 개발에는 컴퓨터 비전과 변환기 모델의 정교한 조합이 포함되었습니다.

• 프레임 분석: 각 비디오 프레임을 분석하여 손 위치와 특정 얼굴 지점에 초점을 맞춰 중요한 신호 구성 요소를 식별합니다.
• 사용자 정의 데이터 세트: 기존 공개 데이터 세트의 제한으로 인해 이러한 AI 모델 교육을 위해 특별하고 더욱 강력한 데이터 세트를 만들었습니다.
• 현재 기능: 이 모델은 손 위치와 특정 얼굴 특징을 해석할 수 있지만 아직 얼굴 표정을 설명할 만큼 발전하지는 않았습니다.

도구 사용 방법

수화 AI 도구를 사용하는 방법은 간단합니다.

1. 조명이 충분하고 상체와 손이 잘 보이는지 확인하세요.
2. 단일 기호 또는 문자 인식의 경우 한 번에 하나의 기호 또는 문자를 수행하십시오.
3. AI가 입력을 처리하도록 허용합니다.
4. 제공된 상위 5개 예측을 검토하세요.
5. 이 피드백을 사용하여 기술을 개선하세요.

사전 페이지 인식을 위해서는 연습하려는 기호로 이동하여 해당 페이지에 내장된 인식 도구를 사용하면 됩니다.

종합 ASL 사전

AI 도구를 보완하는 것은 2,000개 이상의 기호가 포함된 종합 수화 사전입니다. 각 항목은 상세한 손 모양 이미지, 프레임별 기호 분석, 튜토리얼 비디오 및 기호 설명을 제공합니다. 이 사전은 AI 도구의 필수 동반자로서 학습 여정을 지원하는 데 필요한 심층 정보를 제공합니다.

특정 표지판을 검색하든, AI가 제안하는 유사한 표지판을 탐색하든, 이 사전 자세한 ASL 정보를 얻을 수 있는 리소스입니다.

현재의 한계와 향후 개발

우리의 수화 AI는 아직 활발하게 개발 중입니다. 현재 제한 사항과 향후 개선이 필요한 영역은 다음과 같습니다.

• 단일 기호/문자 인식: 이 모델은 교육 목적으로 의도된, 한 번에 하나의 기호나 문자를 이해하도록 설계되었습니다.
• 얼굴 표정 인식: 모델은 주요 얼굴 포인트를 식별할 수 있지만 아직 ASL에서 중요한 얼굴 표정을 해석하지는 않습니다.
• 유사 기호 혼동: AI가 때때로 유사한 기호를 혼동할 수 있습니다. 예를 들어, "어머니"와 "아버지"의 기호는 매우 유사하며 주로 얼굴의 위치가 다릅니다. 마찬가지로, 문자 "M"과 "N"은 초보자와 AI 모두 쉽게 혼동할 수 있습니다.
• 지속적인 개선: 우리는 여러 기호를 순차적으로 인식하고, ASL의 보다 미묘한 측면을 해석하고, 유사한 기호 간의 구별을 개선하는 것을 목표로 모델 기능을 향상시키기 위해 노력하고 있습니다.

수화 AI 사용의 이점

• 즉각적인 피드백: 서명에 대한 즉각적인 분석을 받아 실시간으로 개선하는 데 도움이 됩니다.
• 종합 학습: 사전에 있는 2,000개 이상의 기호를 통해 광범위한 ASL 어휘를 배우고 연습할 수 있습니다.
• 유사 기호 발견: AI는 유사한 기호를 발견하고 구별하는 데 도움을 주어 ASL의 미묘한 차이에 대한 이해를 향상시킵니다.
• 자기 주도형 학습: 언제 어디서나 자신의 속도에 맞춰 연습하세요.
• 자세한 리소스: 각 사전 항목은 손 모양 이미지, 프레임별 기호 분석, 튜토리얼 비디오 및 기호 설명을 제공합니다.
• 기술 강화 학습: 최첨단 AI를 활용하여 기존 ASL 학습 방법을 보완합니다.

ASL 알파벳을 이제 막 배우기 시작한 초보자이든, 수화 기술을 개선하려는 고급 학습자이든 관계없이 이 AI 도구는 지속적인 개선에 필요한 리소스와 피드백을 제공합니다.