MOOCにおける不正行為をどのように防止できるか?

MOOCにおける不正行為をどのように防止できるか?
このページは、生成AIにより自動翻訳されています。

大規模公開オンライン講座(MOOC)の急増により、世界中の個人の学習機会は広がった。しかし、デジタル教室も、不正行為など従来型の教室と同じ問題を抱えている。

新たなワーキングペーパーの中で、MITとハーバード大学の研究者は、オープンなオンライン講座に特有の新たな不正行為の手法を明らかにし、そのような不正行為の防止に有効であることが示された複数の対策を提言している。

ワーキングペーパー「Detecting and Preventing ‘Multiple-Account’ Cheating in Massive Open Online Courses」は本日、電子プレプリントのオンラインリポジトリであるarXiv.orgで公開された。

電気工学および物理学の教授で、MITのデジタル学習担当上級副学部長を務め、ワーキングペーパーの著者の一人でもあるIsaac Chuang氏は、オンライン講座がもたらす学習と不正行為の両面を含む機会全体をより深く理解するため、研究者仲間とともにこの問題の検討に取り組んだと説明している。

「一部のオンライン講座の受講者が、従来の評価やフィードバックの過程を経ずに学習プロセスを回避して修了証を取得しているとすれば、その修了証は必ずしも何かを学んだことを意味しない。これはMOOCの修了証の価値を深刻に損なうおそれがある」とChuang氏は述べる。「これは学術界でよく知られた問題だが、オンライン環境では新しい形で起きている。オンライン教育が拡大を続けるなか、この問題を理解し、対処したい」。

ハーバード大学大学院教育学研究科の教授で、ワーキングペーパーの著者の一人でもあるAndrew Ho氏は、同論文が「MOOCに特有の新たな不正行為の手法」を記述していると付け加えている。「これは、無料で複数のアカウントを作成できるなど、特定の設計上の特徴によって可能になっている。従来型の不正行為では不可能な、1時間で講座の修了証を取得できる方法である。これは別の種類の不正行為だ」。

CAMEO利用者

研究者らは、edXのオンライン学習プラットフォームを利用する学習者から収集したデータを分析する中で、特定の利用者が評価問題に「人間にとって可能な速度より速く」解答していることに気づいた。Chuang氏によれば、そのようであった。さらに調査したところ、研究者らは、多くの学習者が「複数のオンライン上の存在を利用して解答を複写する」(CAMEO)と呼ばれる不正戦略を用いているように見えることを把握した。

この不正の手法では、利用者が複数のアカウントを作成し、そのうちの一つである主アカウントが最終的に修了証を取得する。他のアカウントは、主アカウントのために評価問題の正答を探し出す、すなわち「収集(harvest)」するために使われる。

修了証の取得が可能な講座における不正の程度を明らかにするため、研究者らはCAMEO利用者を特定できる新たなアルゴリズムを開発した。このアルゴリズムは、関連する二つのアカウントの組み合わせを探す。一方のアカウントはほとんどの解答を誤り、もう一方は初回の試行でほとんどを正しく解答するものである。次に、正答を収集していると疑われるアカウントが、主アカウントの直後に特定の問題を解いていないかを確認するため、活動のタイムスタンプが精査される。このアルゴリズムはまた、関連するアカウントが複数の講座にまたがって同じIPアドレスを共有しているかどうかも確認する。

研究者らは、HarvardXおよび MITx が提供する115のMOOCの受講者190万人分のデータを、2012年秋から2015年春まで分析した。研究者らは、CAMEO戦略を用いていたことが判明した69の講座において、獲得された修了証の1.3パーセント(1,237件)が、このような不正行為によって取得されたように見えることを発見した。さらに、20件以上の修了証を獲得した者のうち25パーセントが、CAMEO戦略を用いたように見えることも分かった。一部の講座では、CAMEO利用者が獲得された修了証の最大5パーセントを占める可能性がある。

これらの割合は、一部の見解によれば50パーセントを超える報告済みの不正行為の割合よりは低いものの、著者らはそれでもなお重要であると主張している。「これは、一つの課題における単発の複写という孤立した事例ではない」とHo氏は述べる。「これは修了証の全面的な偽造である」。

CAMEOの利用は、米国外に住む若年で教育水準の低い男性の間で高いことが分かった。米国の利用者の割合は特に低く、獲得された修了証の0.4パーセントであった。著者らは、これらの割合が、国ごとに認識されている修了証の価値と相関している可能性があると指摘している。

CAMEOの利用が最も多かったのは政府、保健、社会科学の講座で、獲得された修了証の1.3パーセントがCAMEO戦略を用いて取得されていた。最も少なかったのはコンピュータサイエンスの講座で、この手法を用いて取得された修了証はわずか0.1パーセントであった。

防止手法

著者らは、オンライン講座における不正行為を防止するための複数の戦略を概説している。その中には、課題の提出期限後まで評価問題の解答を公開しないことや、学習者ごとに個別化された問題セットが与えられるよう問題をランダム化することが含まれる。

しかし、これらの戦略の中には、費用がかかるものや、学習機会を制限しかねないものもある。「学習を可能にすることと不正行為を防止することとの間には、トレードオフが存在するかもしれない」とChuang氏は指摘する。

これらの手法が用いられた可能性のある科学・技術・工学・数学(STEM)の講座では、CAMEOの利用は獲得された修了証のわずか0.1パーセントであった。これは、いずれの防止戦略も用いていない講座の1.2パーセントとは対照的である。

ランダム化などの手法はSTEM講座では容易に導入できる一方、Chuang氏は、評価過程で多肢選択式問題が一般的に用いられる人文系の講座では導入がより難しいと指摘する。それでも研究者らは、著者らが示した防止戦略の一部をコンテンツ作成者が実施し、本研究がMOOCにおける不正行為のさらなる評価を促すことを期待している。

「この論文から得られる最も興味深い教訓の一つは、オンライン講座のコンテンツを作成するチームが実施できる、簡単で不正行為を軽減する方法が存在するということだ」とChuang氏は説明する。「また、仮想監督(バーチャル・プロクタリング)のようなプラットフォームの改善が、不正行為の削減に役立つと期待している」。

「本論文は、高等教育のデジタル化が進むなかで高まっている課題、すなわち学生が行う課題が学生自身の成果であることを確保するという課題を扱っている」と、テキサス大学アーリントン校の学習革新・ネットワーク知識研究所(Learning Innovation and Networked Knowledge)の所長であり、本研究には関与していないGeorge Siemens氏は述べる。

「MOOC、そして本論文の場合でいえば複数のオンライン上の身元の構築は、学術界に新たな課題をもたらしている」とSiemens氏は述べる。「学業成績が就職機会に影響を与えうるため、学習における利害は大きくなりうる。自ら行ったと称する学生が実際にその作業を行ったことを確保することは、オンラインでも教室でも引き続き課題であり続けるだろう」。

本記事は、 MIT Newsとの連携により掲載されたものである。掲載は、世界経済フォーラムによる見解を支持することを意味しない。

Agendaの最新情報を追うには、 週刊ニュースレターを購読してください。

著者:Abby Abazoriusは、MIT Newsのニュース担当官である。

画像:ジョージア州ウィンダーのウェストサイド中学校の生徒であるJose Rosales氏は、2008年1月24日、カナダとの協同教育プロジェクトの一環として、マニトバ州ウィニペグ(カナダ)のCharleswood Junior High Schoolの別の生徒からの質問に、インターネットを介して答えている。REUTERS/Tami Chappell

共有:

ライセンスと再掲載について
世界経済フォーラムの寄稿文は、クリエイティブ・コモンズ表示-非営利-改変禁止 4.0 国際ライセンスおよび同フォーラムの利用規約に従い、再掲載が可能です。