「インクルーシブな」第四次産業革命とは、耳の不自由な学生や難聴の学生(DHH)のニーズに耳を傾けることを意味します。
インタビューから得られた知見によると、オンライン学習はDHH学生の視覚器官に過度な負担をかける可能性があります。
字幕は、DHH学生により適したものとなるよう、文脈に応じてサイズや位置を変えることができます。
COVID-19は2020年に、学生を急速かつ広範囲にオンライン学習へと向かわせました。
当初からYouTube、TED、MOOC、Zoomは、物理的に制限された環境にある学生を支援するために力を注ぎました。同時に、人工知能による 音声からテキストへの自動字幕化 は、メディアサービスがDHH学生を含めるのに役立ちました。
市場と技術は、誰でも、いつでも、どこでも利用できるよう、受益者を包括的に広げつつあるように見えました。しかし、オンライン学習は完全にインクルーシブというわけではありません。
これは、DHH学生の聴覚障害がオンライン学習モデルの前提の一つと相反するためです。これらの学生は、教師のメッセージを目だけで追わなければなりません。つまり、オンライン学習はDHH学生の視覚器官に過度な負担をかける可能性がある一方で、DHH以外の人々はこれにまったく気づいていません。
私たちは、DHHの10代の生徒が通う学校で、学生と教師にインタビューを行いました(図1)。

オンライン学習の動画が速すぎる
インタビューに参加した学生のうち12名が、動画が速すぎると不満を訴えました。通常、テキストよりも手話に親しんでいる学生たちは、手話字幕が含まれている場合でも速すぎると感じました。
DHH学生は、一定の速度で行われている場合でも、画面上の手話が速すぎると主張しています。これは視覚的な負担の結果である可能性が高く、DHH学生は2種類の情報、すなわち音声(テキストまたは手話のいずれか)と映像(全体的な画像)について視覚的刺激に頼っています。
オンライン学習サービスは、既存のテキストに手話を加え、字幕オプションをすべて廃止することで、DHH学生を含めることができます。
キム・ギベ
動画を遅くするだけでは解決策になりません
インタビューに参加したすべての教師は、DHH学生が非DHH学生よりも幅広い読解力を持っていることに同意しました。教室では通常、動画字幕のテキストを読むのが非常に得意な数人の学生と、そうすることに苦労するレベルの低い大多数の学生で構成されています。
一般的な教材は、内容が多すぎるため、大多数のDHH学生にとって有益ではありません。しかし、DHH向けの専用教材は市場が小さく、そのため価格が高くなるため、解決策はそこにあるとは考えていません。
テキスト字幕と手話の両方が有効です
DHH学生は、テキスト字幕と手話のどちらを好むかが分かれます。7名の学生が前者を、7名が後者を好みました。3名の学生は、そのうち2名が重度の障害を抱えているにもかかわらず、字幕なしで動画を視聴できると述べました。
オンライン学習サービスは、既存の字幕オプションに手話を加えることで、DHH学生を含めることができます。それでも、字幕インターフェースに関しては問題が残っています。
最初の問題は、字幕が画面の片側に表示されたままの状況で、誰が話しているのかを認識することです。非DHH学生は声の調子によって話者をすぐに特定します。一方、DHHの人々は映像に手がかりを求めます。しかし、例えば討論が白熱し、動画に話者が映らないときには、こうした手がかりは現れません。そのため、DHHの人々は、テキストに書かれた会話の文脈だけを使って、誰が話しているのかを推測しなければなりません。
最近のいくつかの研究では、話者の追跡を支援する解決策として、 マルチモーダル区分 と 吹き出しが提案されています。
字幕のサイズと言語の選択は不完全な技術です
字幕が大きすぎると動画が隠れてしまい、小さすぎると読みにくくなります。どちらの場合も、DHH学生は、映像が見えないか、字幕の理解に集中しているため、映像の内容を見逃してしまいます。インタビューに参加した学生たちは、字幕のサイズと位置を調整できる機能を求めました。
難しい単語や言い回し、あるいは完全に誤った単語や言い回しは、DHH学生をいらだたせます。誤りや混乱は非DHH学生にとっても問題ですが、少なくとも音声情報と字幕を比較することができます。DHH学生には、誤った解釈、誤解、知識の差を再確認するための代替情報源がありません。
難しい単語への解決策は単純です。手話や画像を用いた補足説明によって、DHH学生は難解な方言、外国語、専門用語を理解しやすくなります。ある学生は、こうした課題に対しては、図解と手話字幕が本当に役立つだろうと提案しました。
人工知能も字幕の正確さに役立っています。しかし、インタビューに応じた全員が、自動字幕システムの不正確さについて不満を述べました。
DHH学生のためのオンラインの再設計
DHH学生のオンライン学習に対する需要は、2つの新しい設計原則を示しています。第一に、このグループの学生は、非DHH学生よりも文脈に基づく設定調整への欲求が強いです。彼らの幅広い読解力は、見逃した場面に戻れるように、速度調整機能と再生コンテンツブロックを必要とします。
字幕は、文脈に応じてサイズや位置を変更し、十分な手話テキストおよび配置オプションを備えることで、理解を向上させることができます。
第二に、DHH学生は対話型辞書支援を必要としています。このような辞書は、動画のメッセージが目だけを通して伝えられることによって生じる誤解を、DHH学生が避けるのに役立ちます。
対話型インターフェースは、例えば、クリックして説明を表示するか自動的に表示するか、またテキストと手話のどちらを使うかを選択できるようにすれば、DHH学生のフォローアップを向上させるでしょう。
オンライン学習サービスは、これらの設計原則を統合すべきであり、そのためには、インターフェースを容易にカスタマイズできるコントロールパネルと、対話型辞書支援のためのパネルを提供する必要があります。
教室が声を上げました。オンライン学習に対するDHH学生の現実の必要性が、今や明らかになっています。耳は通常、目を通して伝えられる不完全で、時には誤った情報伝達を補います。しかし、画一的な設計を広めることによって生じた、小さな問題の積み重ねが、DHH学生を実質的に不利な立場に置いています。
もしこれを認識しなければ、DHH学生が教育の階段を上り、生活を向上させる能力を損なうおそれがあります。だからこそ、私たちの研究グループは、オンライン学習サービスのためのDHH学生に配慮した設計ガイドラインを開発しているのです。
本記事への貢献に対し、ノ・ジュニョン氏(KAIST文化技術大学院教授)およびチェ・ジンファン氏(KAIST人工知能大学院修士課程学生)に感謝いたします。

