プロジェクトチームが開発したCBT英語スピーキングテストのシステムが, 京都工芸繊維大学のAO入試(2017年12月2日実施)で使われます

 

学生のニーズや教育とのつながりを考慮して,English as a Lingua Franca(共通語としての英語)の理念に基づくスピーキングテストを作りました。このテストでは,「21世紀型スキル」と言われる想像力,批判的思考力,問題発見・解決力,創造力などを要する課題(タスク)を,英語を使って達成する能力が測られます。

従来のテストでは,ネイティブスピーカーの英語(発音,文法,発話の流暢さなど)を基準として,受験者の英語がその基準にどれだけ近いかが測られます。しかし,このテストでは,その時点で使える語彙や文法を駆使して,どれだけ効果的に課題を達成できるかだけが測られます。

多様な英語がノン・ネイティブスピーカー同士で用いられることが多くなった今,学生たちに必要なのは,細かい発音を気にしたり,文法の間違いを恐れたりすることなく,堂々と,伝えたいことを伝え,達成すべき課題を達成しようとする姿勢です。学生たちは,英語の使用者(user)であり,学習者(learner)でもあります。意思伝達を重視する姿勢がなければ,使用者としてはもちろん,学習者としても成功することができません。教育との連携で,伝えようとする姿勢や伝えるためのストラテジーを育むためにこのテストを作りました。

テストの目的に合わせて策定した採点基準や採点方法は,テスト理論や採点者からのフィードバックに基づく検証と改善を繰り返しています。同時に開発したコンピュータ方式のテスト実施システムやオンラインの採点システムについては,回を重ねたパイロットテストや学内の定期実施(2014年度より600名規模で実施)を通して,入試導入の実現可能性を検討しました。

ごく小規模ではありますが,AO入試への導入にこぎつけるまでに5年かかりました。

大学法人の理解と,SGU事業予算や科研費(基盤(C)25370713, (B)16H03448)の助成があったからこそ,実践に根ざした研究や検証を,企業にはできない角度から進めることができました。

プロジェクトの半ばで,志を共にしてきたアカデミック・アドバイザーのNic Underhillを失うという悲しい出来事がありました。そのほかにも大小の障害に何度もぶつかりましたが,そのたびに幸運な出逢いに恵まれ,心ある方に支えていただいて,何とかここまで来ることができました。

お名前をあげることは差し控えますが,お力添えをくださった皆さまに,心よりお礼を申し上げます。

ライティングテストのCBTシステムも本年3月までに完成しています。しかし,入試に使うかどうかは白紙の状態です。入力方法,辞書機能や予測変換の利用など,研究課題もたくさんあります。これから時間をかけて,入試導入の実現可能性を検証し,必要な改善をしていきます。通過点として,まずは学内で安定した運営ができるようになることを目指します。

2020年度から始まる予定の「共通テスト」についても,学術的な理論に基づく検討や現実に則した検証が慎重に行われることに期待します。

たった45秒の音声回答でも,何をどう測るか(評価観点,採点基準,採点方法)で,スコアは大きく異なります。今回の英語入試改革については,どのようなテストをどう用いることが,現場の教育を助け,生徒の能力向上につながるかがが十分に議論されていないように思われます。

この件に関するプレスリリースはこちらから。スピーキングテストの「概要」や「サンプルテスト(動画および紙バージョン)」,同時に行うライティングテストの概要などはこちらから。スピーキングテストのテストスペックはこちらから。

広告

京都工学院高校フロンティア理数科の三学期末考査において,スカイプ方式の英語スピーキングテストを実施しました

2017年2月6日(月),京都工学院高校フロンティア理数科の三学期末考査において,スカイプ方式の英語スピーキングテストを実施し,2クラス(計54名)の生徒が受験しました。

このテストは,1年生が履修する科目「英語表現Ⅰ」の学期末テストとしてデザインしたもので,2016年7月4日(月)の一学期末テスト,同年11月28日(月)の二学期末テストに続いて,今回が3回目の実施となりました。テストのスコアは「英語表現 Ⅰ」の成績に加味されます。

Test Structure

Rating Scales

インタビューテストの内容と準備について(生徒への配布資料)

dsc_1957dsc_1944dsc_1945

 

京都工繊大1年次生全員を対象とする第3回CBT方式英語スピーキングテストの実施

2017年1月7日(土)と8日(日)の2日間に渡って,本学情報科学センター演習室3部屋において,本学が独自に開発したコンピュータ方式の英語スピーキングテスト(KIT Speaking Test: English for 21st Century)を実施しました。

7日には1年次生全員がテストを受験し,8日には前日に実施した3バージョンのテストを等化するためのアンカー受験者が受験しました。テスト開始から3年。年を追うごとに,テストに臨む学生の姿勢が積極的になり,回答する声が大きくなってきています。

これから約3週間かけて採点作業を行い,テストのスコアを1年次配当の必修科目Interactive English の成績に加味することになっています。各学生にスコアシートも配られます。img_0167img_0166img_0165

京都工学院高校フロンティア理数科の二学期末考査において,スカイプ方式の英語スピーキングテストを実施しました

2016年11月28日(月),京都工学院高校フロンティア理数科の二学期末考査において,スカイプ方式の英語スピーキングテストを実施し,2クラス(計58名)の生徒が受験しました。

このテストは,1年生が履修する科目「英語表現Ⅰ」の学期末テストとしてデザインしたもので,7月4日(月)の一学期末テストにおけるパイロット実施を経て,二学期末テストより本格導入しました。今回より,テストのスコアが「英語表現 Ⅰ」の成績に加味されます。

次回のテストは,三学期末考査の一環として,2017年2月6日(月)に実施する予定です。

Test Structure

Rating Scales

インタビューテストの内容と準備について(生徒への配布資料)

プレスリリース

dsc_1731dsc_1739dsc_1762

CBT方式英語スピーキングテストのパイロットテストを実施しました

2016年10月27日(木),本学情報科学センター演習室にて,毎年1年次生全員を対象に実施しているCBT方式英語スピーキングテストの性能向上を目的としたパイロットテストを実施しました。テストは3回に分けて行われ,学部生と大学院生計34名が被験者として参加しました。img_9812

京都工学院高校フロンティア理数科の一学期末考査において,ビデオフォン方式の英語スピーキングテストを実施しました

京都工芸繊維大学は、独自のCBT(Computer-Based Test)を開発し,学内で定期実施することにより,大学院や学部入試への英語スピーキングテスト導入の早期実現を目指しています。このたび、その実績を活かして,京都市立京都工学院高校において,生徒とフィリピン・セブ島の面接官をSkype(スカイプ)で結ぶビデオフォン方式の英語スピーキングテストを開発しました。このテストは,一年生が履修する科目「英語表現 Ⅰ」の学期末考査としてデザインしたもので,7月4日(月)には一学期末考査の一環として,2クラス(計58名)の生徒がこのテストをパイロット受験しました。今回の成果を踏まえて,二学期末考査より本格導入する予定です。

プロジェクトの背景
過去3年あまり,京都工繊大において,入試導入を目指して英語スピーキングテストの開発・運営を進めてきましたが,その過程で実現に向けたいくつかの課題が浮かび上がってきました。なかでも最も大きな問題は,学生たちの準備が整っていないことです。開発したCBTスピーキングテストを受験した直後のアンケート調査では,70%以上の学生が「自分のスピーキング力が適切に測られたと感じる」「向上への意欲が湧いた」「学内での定期実施を歓迎する」等,テストの内容や学内での定期実施に関して肯定的な回答をしてきます。その一方で,大学院の入試に同様のテストを導入することに関しては,「死ぬ!」「つらい!」「やめて!」「途方に暮れる」「他大学の大学院を受験する」等,不安や拒絶感を露わにする声が圧倒的です。また,「話すための教育を受けていない」「対策法が分からない」「練習の機会がない」といった抗議の声も並びます。

近頃は,京都工繊大はもちろん,中学や高校でもバランスの取れた4技能育成を目指して,スピーキング指導にも力を入れています。しかし,実際にスピーキング能力が伸びる指導が行われているかという点には大きな疑問が残ります。また,多くの学生はスピーキングテストというもの自体を受けたことがありません。そういう現実を直視することなく,大学院の入試に突然スピーキングテストが導入されるとなると,学生たちが戸惑うのは当然です。授業を担当する教員の側もスピーキング指導に慣れていなければ,安直なテスト対策として,発音指導や発話中の文法的誤りを減らす訓練などに力が入ってしまうことでしょう。それでは,学生のスピーキング能力の向上は望めず,スピーキングテストの入試導入に寄せられる期待に応えることはできません。

リーディングやライティングと同じようにスピーキングに関しても,「日常的な指導→学習成果を測る定期的なテスト」というサイクルの延長線上に入試が来るのが理想です。そのために何ができるかを検討した結果,一つの可能性としてこのプロジェクトを進めることになりました。

パイロット実施の手ごたえ
当日,京都工学院高校の生徒さんたちは緊張しながらも,モニターに映るインタビュアーとのインタラクションに積極的に取り組み,たびたび笑い声も上がっていました。「テスト中の生徒たちは,これまでにない高揚した表情をしていた」と先生方も仰っていました。受験後のアンケート調査の結果も,「楽しかった」84.5%,「スピーキング力を伸ばすためにもっと努力しようと思った」89.7%,「英語表現Iの勉強をもっと頑張ろうと思った」82.8%等,このテストが学習意欲の向上につながる可能性を強く示唆するものでした。

これらより,テストの企画開発に取り組む研究者グループは,今後このような取り組みが軌道に乗り,中学・高校段階で,生徒のレベルやニーズに合わせて企画したスピーキングテストを比較的簡単に定期実施できるようになると,日本人全体の英語運用能力の画期的な伸びにつながるかもしれないという手応えを得ました。

今後に向けた課題
(1) スカイプやポリコムなどのビデオフォン(テレビ電話)システムを使うことにより,同時に多人数が対面(インタビュー)方式のスピーキングテストを受けることができます。しかし一方では,外部ネットワークの影響によるテスト運用システムの安定性に不安があるため,徹底したリスク管理が必要になります。

(2) テストはプレゼン等を含むplanned speechとその内容に関するinteractionから成り,前者は当該期間の学習成果を,後者はインタラクティブなスピーキング能力の上達度を表すものとして,別々に評価しています。今後は,後者のスコアを標準化するとともに,評定尺度をCEFRあるいはCEFR-Jと紐付けすることを目指しています。

なお,テストの内容や評定尺度,京都工学院高校の生徒さんのテスト受験前・後のアンケートの分析結果等は,今後関連の学会等で発表していく予定です。

※本事業は,フィリピンに拠点を置いてスカイプ英会話レッスンを提供するQQ Englishとの共同研究として進めています。また,平成28年度科学研究費基盤研究(B)「入学試験や定期考査に利用できる英語スピーキングテストシステム構築のための指針策定」(課題番号16H03448)の助成を受けています。

テストの背景・特徴など(記者発表資料)

プレスリリース

京都新聞(7/5朝刊の記事)

DSC_1611DSC_1632DSC_1596