本稿では，日本の大学1年生102名の英語コミュニケーション能力を，1セメスターにわたり詳細に分析する，総合的な縦断研究を行った。2名の教員が，それぞれ2クラスの授業において，一方は教科書，他方はポッドキャストを教材として用いた。各クラスにおいては英語力や専攻などの変数を統制した。セメスターの最初，中間，および最後に，コミュニケーション能力テストを実施した。特筆すべき点として，本稿で用いられている実験手法は，Gilmore (2011) の重要な研究を一部踏襲している。同研究では，ウェブを中心とする「オーセンティックな教材」を用いる方が教科書に比べて効果が高いとされた。それゆえ，本稿の目的は，Gilmore の研究結果を確認し，教科書とポッドキャストを用いた教材のどちらが，学生の口頭能力の向上に効果が高いかを探ることにある。

本研究の結果，どちらの教材を用いても，学生は同様の向上を示した。例えば，リスニングテストでは全4クラスにおいて，平均約10%の，統計的に有意なスコアの上昇が見られた (p < .05)。また，語彙・文法のスコアは，概ねどのクラスも特に向上は見られなかった。録音によるスピーキングテストでは，全クラスで，流暢さ（3分間に発話された語数），/l/ の発音の正確さの点で有意な上昇が見られた。しかし，冠詞や前置詞といったその他の難易度の高い文法項目においては，どのクラスにおいても，概して向上は見られなかった。本研究の結果は，ウェブを教材に用いる方が教科書よりも良いとする Gilmore の主張に重大な疑問を呈するものである。

In a comprehensive longitudinal study, the English communicative abilities of 102 Japanese university freshmen were analyzed in detail during one semester. Two teachers each taught two courses; in one course a textbook was used, and in the other course podcasts were used. There were several controlled variables, including starting language abilities and student majors. A series of communicative language tests were given at the beginning, middle, and end of the semester. Importantly, the experimental method used here partially mirrored an influential study published by Gilmore (2011), which found that utilizing “authentic materials”—which were mostly Web-based—seemed to be more effective than utilizing textbooks. Thus, the goal of the present study was to confirm Gilmore’s findings by determining which pedagogical materials were more effective in improving students’ oral abilities: textbooks or podcasts.

It was found that students progressed in similar ways, regardless of the pedagogical materials used. For example, students in all four classes improved their scores on listening tests by an average of about 10%, this improvement being statistically significant (p < .05). And, on average, students in none of the classes noticeably improved their vocabulary-grammar scores much. On audio recordings of students having conversations in English, there were remarkable improvements during the semester in all classes with respect to both fluency (number of words uttered during 3 minutes) and the correct pronunciation of /l/. But none of the classes, when taken as a whole, seemed to improve other spoken grammatical trouble spots, such as use of grammatical articles or prepositions. The results seriously question Gilmore’s contention that Web-based materials are better than textbooks.