手話AI: ASL学習に革命を起こす

目次

1. 作成者について
2. StrongASL.com の手話 AI ツール
3. 手話AIはどうやって作られたのか
4. ツールの使い方
5. 包括的なASL辞書
6. 現在の限界と将来の発展
7. 手話AIを使用するメリット

作成者について

こんにちは！私はこの手話 AI ツールの作成者、ポール ケリーです。私は CODA (聴覚障害者の子ども) であり、15 年間の認定手話通訳者として、聴覚障害者コミュニティと深い個人的なつながりがあり、ASL を深く理解しています。この経歴と、言語学習にテクノロジーを活用したいという私の情熱が相まって、ASL をよりアクセスしやすく、簡単に学習できるようにする革新的なソリューションを開発するようになりました。

AIと言語教育における私の経験は、ASL学習体験を大幅に向上させるツールの作成に役立っています。私の仕事やその他のプロジェクトの詳細については、 paulbrucekelly.com. さらに高度なAIモデルも作成しました。 signlanguageai.com 一度に複数の記号や文字を認識できます。

StrongASL.com の手話 AI ツール

この AI ツールは、高度なコンピューター ビジョン技術を活用してビデオ フレームをリアルタイムで分析します。これにより、ASL の個々の文字や単語を認識して解釈し、ユーザーに手話に関する即時のフィードバックを提供します。数秒以内に AI が入力を処理し、最も可能性の高い上位 5 つの手話を予測し、包括的な学習体験を提供します。

シングルサイン認識

このツールは、2,000 を超える手話の膨大な辞書から、ASL の個々の単語を認識して解釈できます。実行された手話ごとに、最も可能性の高い上位 5 つの予測をユーザーに提供します。

一文字認識

この機能は特に ASL アルファベットに焦点を当てており、26 文字すべてを認識し、指文字の正確さに関する即時フィードバックを提供します。

辞書ページ認識

当社の包括的な ASL 辞書の各エントリには独自の手話認識ツールが装備されており、ユーザーは特定の手話を練習し、即座にフィードバックを受け取ることができます。

手話AIはどうやって作られたのか

当社の手話 AI の開発には、コンピューター ビジョンとトランスフォーマー モデルの高度な組み合わせが採用されました。

• フレーム分析: 各ビデオ フレームを分析して、手の位置と特定の顔のポイントに焦点を当て、重要なサイン コンポーネントを識別します。
• カスタム データセット: 既存の公開データセットの制限のため、これらの AI モデルをトレーニングするための特別な、より堅牢なデータセットを作成しました。
• 現在の機能: モデルは手の位置や特定の顔の特徴を解釈できますが、顔の表情を考慮できるほどには進歩していません。

ツールの使い方

手話 AI ツールの使用は簡単です。

1. 十分な照明があり、上半身と手がはっきりと見えることを確認してください。
2. 単一の記号または文字の認識の場合は、一度に 1 つの記号または文字を実行します。
3. AI が入力を処理できるようにします。
4. 提供された上位 5 つの予測を確認します。
5. このフィードバックを利用してテクニックを改良してください。

辞書ページの認識については、練習したい手話に移動し、そのページに埋め込まれた認識ツールを使用するだけです。

包括的なASL辞書

AI ツールを補完するのは、2,000 以上の手話を収録した総合的な手話辞書です。各エントリには、詳細な手形の画像、フレームごとの手話の内訳、チュートリアル ビデオ、手話の説明が含まれています。この辞書は AI ツールに不可欠なものであり、学習の過程をサポートする詳細な情報を提供します。

特定の標識を調べる場合でも、AIが提案する類似の標識を調べる場合でも、 この辞書 詳細な ASL 情報を得るための頼りになるリソースです。

現在の限界と将来の発展

当社の手話 AI はまだ開発中です。現在の制限と今後の改善領域は次のとおりです。

• 単一の記号/文字の認識: このモデルは、教育目的のために、一度に 1 つの記号または文字を理解するように設計されています。
• 表情認識: このモデルは顔の重要なポイントを識別できますが、ASL で非常に重要な表情を解釈することはまだできません。
• 類似の記号の混同: AI は類似の記号を混同することがあります。たとえば、「母」と「父」の記号は非常に似ていますが、主に顔の配置が異なります。同様に、「M」と「N」の文字は初心者と AI の両方によって簡単に混同される可能性があります。
• 継続的な改善: 私たちは、複数の手話を連続して認識し、ASL のより微妙な側面を解釈し、類似の手話の区別を改善することを目指して、モデルの機能強化に取り組んでいます。

手話AIを使用するメリット

• 即時フィードバック: サインの即時分析を取得し、リアルタイムで改善できるようにします。
• 包括的な学習: 辞書には 2,000 を超える手話が収録されており、幅広い ASL 語彙を学習して練習できます。
• 類似の手話の発見: AI は類似の手話を発見して区別するのに役立ち、ASL の微妙な違いに対する理解を深めます。
• 自分のペースで学習: いつでもどこでも自分のペースで練習できます。
• 詳細なリソース: 各辞書エントリには、手形の画像、フレームごとのサインの内訳、チュートリアル ビデオ、サインの説明が記載されています。
• テクノロジーを活用した学習: 最先端の AI を活用して、従来の ASL 学習方法を補完します。

ASL アルファベットを学び始めたばかりの初心者でも、手話のテクニックを磨きたい上級学習者でも、この AI ツールは継続的な改善に必要なリソースとフィードバックを提供します。