基于TELLMEMORE英语学习软件的大学英语听说课程教学效果评价研究

李可夫

（辽宁对外经贸学院，辽宁 大连 116052）

一、研究背景

目前，高等院校的大学英语教学，尤其是听说课程教学受各种因素的制约，效果并不理想。为了解决这一问题，有些院校尝试引入英语学习软件进行辅助教学。英语学习软件辅助教学是计算机多媒体教学的进一步延伸，离不开计算机技术的发展，离不开多媒体教学的广泛传播。由于它将内容丰富的多媒体教学资源与学生的自主学习有机结合，在一定程度上弥补了传统大学英语听说课程的不足。这种学习方式充分体现了以学生为中心的个性化学习，是人格化的人本主义在教学理论上的具体体现；学习者能够随时随地进行学习，使终身学习成为可能；构建了师生、生生间平等交际的平台，使学习在协商和合作中进行。此外，多种媒体通过计算机处理高度整合，使学习内容更加丰富，学习以问题或主题为中心，具有创造性和再生性。

目前，有些院校已经把英语学习软件应用到英语教学中，一些一线教师也对学习软件的效果进行了研究。研究较多的有大学体验英语听说自主学习系统软件。如来东慧和陶亭亭分别对大学体验英语听说自主学习系统软件的使用状况进行了调查研究。前者的研究结果表明，该学习软件得到了学习者的认可,学习者在使用软件学习时有一定的自我效能感，不足之处在于学习者自我管理策略使用不够理想。后者发现该英语学习软件使用效果明显。朱芸调查了学生对大学体验英语听说学习系统的使用情况,指出该系统本身具有的一些缺点和优点。王薇薇论述了DynEd教学软件对学生的英语自主学习能力培养状况。研究者通过调查问卷对学生的软件使用情况进行调查,发现该软件对学生自主学习能力的培养具有一定的促进作用,能够让学生成为学习的主角,让学生感受到学习的进步,从而让学生增强对英语学习的成就感和自信心,爱上学习英语,真正做到自主学习。马红研究了北青院使用的TELLMEMORE，以及学习者的学习策略使用状况,认为教师在教学中要帮助学生使用学习策略,并且策略的训练和心理辅导融为一体,培养学生主动学习的习惯。

总的来看，对于英语学习软件教学效果的研究并不是很多，而且现有的研究中针对诸如TELLMEMORE这类大型学习软件的比较少。TELLMEMORE是一款英语在线学习系统。它有一套完整的电脑化外语学习（E-Learning）解决方案，教学内容涵盖掌握一门语言的各种能力：口语表达、书面表达、阅读、听力和文化背景知识，语言级别从初学者到专家级。本文作者所在院校引进TELLMEMORE英语学习软件，将其应用到大学英语听说课程的教学中。本文主要就TELLMEMORE英语学习软件（下文简称TMM）的使用效果进行研究。

二、研究设计

1.受试对象

本研究采用分层抽样的方法，从作者所在学院2011级本专科、2012级本专科和2013级本专科中随机抽取50名被试参加研究中的问卷调查。这50名被试中既有使用TMM长达四个学期的学生，也有使用时间达两个学期的学生，最短的时间是一个学期。

2.数据收集与处理

本研究采用了定量分析与定性分析相结合的研究方法。通过问卷调查获得被试使用该学习软件的有关信息。通过定量分析，利用社会科学统计软件包（SPSS）对采集到的相关数据进行统计。本课题研究的数据包括两个部分：调查问卷数据和TMM课程测试数据。

调查问卷数据主要通过一个语义区分量表采集。该量表共有十四个问题，分别调查了解被试对TMM学习系统提高英语听说能力的评价、TMM学习系统的适用性、TMM学习系统目前采用考核方式的满意度、教师在TMM学习系统中的作用、利用TMM自主学习状况和对TMM学习系统的总体感受。语义量表后附有两个问题，分别了解被试如何看待TMM学习系统的优点和缺点，要求被试把优缺点写出来（这两个问题不计分）。本语义量表满分98分，最低分14分。语义量表由任课教师发放给随机抽取的被试，发放50份，回收50份。调查问卷全部有效。

TMM课程测试数据由TMM学习系统后台管理工具导出。为了确保数据的完整性，研究中的课程测试成绩采用简单随机抽样的方法，从已完成全部TMM课程学习的2011级本专科学生中抽取，共抽取50个样本的200个数据。数据共四部分，分别为第一学年第一学期定级测试成绩、第一学年第二学期期末阶段测试成绩、第二学年第一学期定级测试成绩和第二学年第二学期期末阶段测试成绩。四次测试试题均来自TMM学习系统的试题库，试题均随机生成，满分10分。所有数据通过SPSS进行处理。

使用SPSS对调查问卷数据的效度和信度进行分析，Cronbach'sAlpha=.745，表明该调查问卷的内在一致性较强，测量的结果比较可靠。而效度分析中，第五个问题相关系数为-.117,P=.419；第八个问题相关系数为.128，P=.377;第九个问题相关系数为.167,P=.246;第十二个问题相关系数为-.019,P=.895。这几个问题的区分度均未达到显著性水平（P≤.05）,相关系数均小于.30，因此在数据分析时予以删除。修订后的语义量表满分70分，最低分7分。

三、结果与讨论

（一）调查问卷结果与分析

表1为调查问卷中语义量表项目数据处理后的结果。主要涵盖问卷六个维度、十个问题。

表1 语义量表项目数据分析表

1.对TMM学习系统提高英语听说能力的评价

该维度的测量共有两个问题。分别考察被试对TMM学习系统提高英语听说能力的认可程度。从表1可以看出，学生对于TMM学习系统提高英语听说能力的认可度较高。这两项的众数均为7分，这两个问题得分均值分别为5.44分和5.42分，该维度总体得分平均分为10.86分（表2），而且满分较多；说明大多数学生认为该学习系统能够很大程度地提高英语的口语和听力能力。实际上，有86%的学生选择4分及以上，认可度较低的学生比例仅为14%。问卷结果说明，TMM学习系统在提高英语听说能力上具有自己的优势。

2.对TMM学习系统的适用性的评价

对TMM学习系统的适用性的评价包括对该学习系统硬件的评价以及软件的评价。硬件评价旨在了解该学习系统在运行过程中对计算机硬件配置要求的高低，在运行过程中是否容易造成计算机的崩溃等问题；软件评价旨在了解学生在使用该学习系统过程中程序的响应情况，及程序设计是否存在缺陷而导致学习过程无法进行。

调查结果见表1。该维度中第一个问题的均值为4.30分，第二个问题均值为4.68分，总得分均值为8.98分，与该维度满分14分相比差距较大。此外，对于硬件故障问题，74%的学生选择4分及以上；软件故障问题有66%的学生选择4分以上。这些数据表明，学生在使用TMM学习系统的过程中，遇到计算机硬件和学习软件故障的几率较大。这些故障可能是由学生计算机硬件配置造成的，也可能是由操作不当引起的。比如，在教学中经常会有学生由于学习结束后未正常退出账号而导致的账号锁死情况。由于该软件没有解锁锁定账号的功能，这些学生只能在重启服务器之后才能继续学习。问卷数据说明，TMM学习系统还有改进的余地。例如，可以考虑增加学生账号锁定的解锁功能，不能一味地依赖服务器的重启。

3.对 TMM 学习系统采用考核方式满意度评价

该维度考察被试对目前TMM学习系统使用的考核方式的满意程度。学生在使用该系统学习后，需要考核。目前考核方法主要由两部分构成：课外考核以及课内考核。课外考核主要是针对学生课外利用TMM学习系统进行自主学习情况的考核，包括上机学习总时间、学习任务完成率、学习任务完成正确率三个方面。课内考核包括每个level的阶段测试、学期末的听力测试和口语测试、课堂表现及出勤等考核指标。

调查结果说明，学生对目前采取的考核评价方式大体上满意，该项目平均得分5.02分。统计表明，有86%的学生该项目得分4分或4分以上。说明目前的考核方式比较全面地反映了学生利用TMM学习系统进行学习的各种因素，能够比较公平、公正地对学生的学习状况进行评价考核。

4.教师在TMM学习系统中的作用评价

教师在TMM学习系统中的作用主要包括两个方面：首先，教师在学生课外利用TMM学习系统进行自主学习过程中的辅助作用，如学习结果的反馈、学习任务的下发、学习过程的监督和辅导等。其次，教师在课堂中利用TMM学习系统，组织学生进行课上学习、进行课堂听说活动、集中答疑解惑等。理论上，在TMM学习系统中，教师的作用处于次要、从属的地位，因为该学习系统的特色就是人机互动、人机直接对话。

统计数据表明，学生总体上认为教师在学习过程中的作用不是很大。教师作用一项平均得分4.48分，标准差为1.821；课堂讲解一项平均得分4.34分，标准差为1.814。教师课堂讲解作用略低于其他课外辅助作用。有68%的学生认为教师在学习过程中具有一定作用（即该项目得分4分及以上者），32%的学生认为在学习过程中教师作用不大。有64%的学生认为教师的课堂讲解具有一定作用，36%的学生认为教师的课堂讲解等对使用TMM学习系统学习帮助不大。出现这种情况并不意外，因为TMM学习系统主要是依附于计算机，通过人机互动提高学习者的英语听说能力。该学习系统能够提供单词翻译、发音、语法讲解等辅助功能，使学生能够不依靠老师完成全部课程的学习。

5.利用TMM自主学习状况评价

调查被试利用TMM学习系统进行自主学习的情况是要了解学生是否充分利用该学习系统的优势，在课外主动进行自主学习。该维度只有一个问题。该项得分均值为4.92分有78%的学生会主动利用课外时间自主上机学习，有22%的学生表示自主学习时间较少。这表明，由于课程考核方式的约束，大多数学生能够主动完成自主学习任务，充分利用TMM学习系统的优势进行课外自主学习；但是仍有一小部分学生缺乏学习自主性任课教师应当帮助这一部分学生养成自主学习的好习惯。

表2 问卷项目总体分析表

6.对TMM学习系统的总体感受评价

对TMM学习系统的总体感受考察被试使用该学习系统后的总体印象以及今后继续选用该学习系统的意愿。根据问卷调查结果，使用感受和继续使用这两项得分均值都是4.98分，总体维度得分9.96分。有86%的学生对该学习系统感觉良好，有82%的学生表示当有其他类似产品时，会继续选用TMM在线学习系统。这说明凭借着先进的人机对话、互动功能和操作简单等特点，该学习软件能够较好地提高使用者英语口语和听力能力，得到了学生的认可。

7.对调查问卷的总体分析

表2对全部六个维度的有效项目进行总体分析。得分最高的维度有对TMM学习系统提高英语听说能力的评价（平均分10.86分，得分率77.57%）、对TMM学习系统采用考核方式满意度的评价（平均分5.02分，得分率71.71%）及对TMM学习系统的总体感受（平均分9.96分，得分率71.14%）；其次为利用TMM自主学习状况评价（平均分4.92分，得分率70.29）；得分较低的主要有TMM学习系统的适用性评价（平均分8.98分，得分率64.14%）、教师在TMM学习系统中的作用评价（平均分8.82分，得分率63.00%）。

调查问卷表明虽然学生对该学习系统认可度较强，可以提高学生的英语听说能力，并且对考核方式比较满意，但是学生利用该系统自主学习的习惯还没有养成，系统中存在的软硬件方面的问题一定程度上影响了学生的学习热情，尤其是教师的作用还没有完全被发掘出来。

（二）TMM学习系统优缺点反馈

在调查问卷后附有两个问题，要求被试列出TMM学习系统的优点和缺点（数目不限）。学生列出的优点主要有：TMM学习系统能够提高英语口语和听力能力（36人次）、TMM学习系统能够提高英语综合运用能力（11人次）、TMM学习系统有利于学生扩展记忆单词（11人次）、TMM学习系统能够增强学生学习英语的自觉性（8人次）、TMM学习系统能够纠正学生的英语单词发音（8人次）、TMM学习系统有助于学生学习英语语法及应用（6人次）、TMM学习系统能够激发学生英语学习兴趣（5人次）、TMM学习系统能够提高学生写作能力（2人次）、TMM学习系统内容多以及覆盖面广（2人次）、TMM学习系统有针对性地制定个人学习目标（1人次）、TMM学习系统答案反馈及时准确（1人次）。

这些优点可以归结为英语基本技能方面的优势、学习系统功能方面和学习者个体发展方面。学生列出的缺点主要有：TMM学习系统不稳定（14人次）、TMM学习系统语音识别标准较高（10人次）、TMM学习系统中个别题型“不必要”（9人次）、TMM学习系统有些题型浪费时间，对能力提高帮助不大（6人次）、TMM学习系统题型单一、重复较多、难易极端化（3人次）、TMM学习系统插件不会安装（3人次）、TMM学习系统的语法过少，有些语法练习过于简单（3人次）、TMM学习系统版本老旧（1人次）、TMM学习系统对等级考试内容涉及较少（1人次）、TMM学习系统易受网络状况影响，有时登录页面无法打开（1人次）。

这些缺点主要涉及到学习系统的软件、学习系统的硬件及学习系统的题型设置几个方面。学生反映出的这些优缺点与问卷调查数据体现出的结果大体一致。如对TMM学习系统能够提高英语口语和听力能力的认可（优点）在调查问卷中得分率最高，而TMM学习系统不稳定（缺点，对应问卷中TMM学习系统适用性这一维度）得分率极低。学生反馈的结果说明TMM学习系统还有不尽如人意的地方，软件开发者还应当适应科学技术发展潮流，考虑使用者的感受，对软件中存在的问题不断改进、完善。

（三）TMM学习系统阶段测试成绩分析

四次测试试题均来自TMM学习系统的试题库，试题均随机生成，满分10分。测试成绩通过TMM学习系统的后台管理工具导出，学生测试成绩显示，成绩大体上分布在3分至7分之间，尤以4至6分居多。附表1列出了四次测试的描述统计量，四次测验的偏度分别为 -.495，-.491，-.331，-.279，峰度分别为 -.130，-.148，-.200，.136；无论是峰度还是偏度均小于 1，说明四次测试的成绩大体呈正态分布。第一次测验均值4.74分，总分237.20分；第二次均值5.19分，总分259.60分；第三次测验均值5.39分，总分269.40分；第四次测验均值5.62分，总分281.10分，说明测试成绩总体呈上升趋势。第二次测验和第三次测验差别不大，这两次测验的中数基本持平，两次测验均值相差0.2分。这是因为第二次测验是在学期末进行，第三次测验在下一学期初进行，在假期期间学生没有利用TMM进行学习。这也从侧面证实了TMM学习系统对提高学生成绩的有效性。（见附表1）

四次成绩呈逐步上升的趋势。由于第二次测验和第三次测验之间学生没有进行学习，主要对第一次与第二次测试成绩和第一次与第四次成绩进行比较分析。第一次测验成绩均值为4.74分，第二次测验均值5.19分，平均提高0.45分。两次测验全距、总分都呈增大趋势（数据见附表1），说明学生成绩最高分增大。通过附表1可知第四次测验均值5.62分，全距进一步增大为7.90分。以上差别明显表明学生使用TMM学习系统后成绩的增加趋势。

以上描述性分析说明，在使用TMM学习系统学习一定时间后，学生成绩有提高；学生成绩的提高与TMM学习系统的使用两者之间是否存在必然联系可以通过相关分析加以检验。相关分析采用配对样本T检验的方法，对四次测试进行检验。由于四次阶段测试成绩均呈正态分布，相关系数选用Pearson相关系数。检验结果见附表2。

四次测验相关系数分别为.716，.796，.721，.755，.763，.708，四次测验成绩均呈正相关，显著水平均为.000，达到统计意义。数据说明四次测验成绩之间存在着显著的相关关系，学生成绩的提高与TMM学习系统的使用两者之间存在必然联系。

四、结论

本文研究TMM学习软件的使用效果、学生对其评价以及该软件对学习者听说能力提高的促进作用。在对学生的调查问卷分析之后，可以看出学生总体上认同TMM学习系统在提高英语听说能力方面的作用，对TMM学习系统总体感受良好，该学习系统有助于学生自主学习习惯的养成和能力的提升，学生对目前采取的课程考核方式基本满意；但是对于学习系统的适用性评价不高，此外，教师在学生学习过程中的地位和作用还需加强。

学生对问卷后问题的回答与调查问卷统计结果基本一致，优点主要体现在TMM学习系统提高英语听说基本技能、促进学习者个体发展以及TMM学习系统自身功能几个方面（如TMM学习系统内容多，覆盖面广；答案反馈及时准确；有针对性地制定个人学习目标等）。不足之处主要包括学习系统的软件、硬件问题及学习系统的题型设置（如题型单一、重复较多、难易极端化）。学生反馈的问题说明TMM学习系统还有不尽如人意的地方，软件开发者还应当适应科学技术发展潮流，考虑使用者的感受，对软件中存在的问题不断改进、完善。

学生四次阶段测试成绩总体呈递增趋势，无论是描述性统计量还是配对样本T检验的结果,均表明学生使用TMM学习系统后成绩稳步提高。说明TMM学习系统在促进学生英语听说能力提高方面效果明显。

2013年教育部对英语课程的教学与考核提出了改革方向与思路，改革后的英语考核更注重学生的英语综合能力。大学英语教学更应注重学生英语综合应用能力的培养与发展；本研究说明充分利用计算机技术和网络技术，使用诸如TELLMEMORE这类E-learning教学软件能够达到预期目的，是实现这一目标的有力保障。

[1]莫锦国.外语E-learning——理论与实践[M].上海：上海外语教育出版社，2011.

[2]来东慧.“大学体验英语听说自主学习系统”软件的使用调查研究[J].考试周刊，2011（52）：116-118.

[3]马红.高职生网络软件英语学习策略的实证研究[J].职教探索，2011（3）：175-177.

[4]陶亭亭.大学体验英语听说自主学习软件的应用研究[J].韶关学院学报，2008（5）：150-153.

[5]王薇薇.DynEd教学软件与英语自主学习能力的培养[J].浙江工商职业技术学院学报，2009（1）：60-62.

[6]朱芸.基于软件的大学英语听说活动调查与分析—读《大学体验英语听说学习系统》[J].南昌教育学院学报，2010（5）：164-165.

附表1 四次阶段测试成绩描述表

附表2 四次阶段测验相关检验