Google Analytics在教育网站评价中的应用研究—以“教育技术学开放教育资源”网站为例
2012-09-22马红亮孟庆喜
马红亮,孟庆喜
陕西师范大学教育技术系,西安 710062
·网络与远程教育·
Google Analytics在教育网站评价中的应用研究—以“教育技术学开放教育资源”网站为例
马红亮,孟庆喜
陕西师范大学教育技术系,西安 710062
以基于Moodle的“教育技术学开放教育资源”网站为例,利用Google Analytics对该网站的受众群体、网站内容以及流量来源进行了多种维度的分析。指出:①Google Analytics能够为定量评价教育网站提供非常丰富的各类流量数据,但评价需要综合应用不同维度、不同层次的数据进行综合分析;②在这些丰富的数据中,网站内容分析方面的数据对于以课程为中心的教育网站而言,具有十分重要的价值。
Google Analytics;教育网站;Moodle;开放教育资源;评价
近年来,如何评价教育网站逐渐引起了人们的关注。教育网站的评价,从逻辑关系而言,也属于教育评价的范畴,由此我们可以参考教育评价的功能[1],推论得出教育网站评价具有诊断教育网站情况、改进教育网站运行效果、区分教育网站水准、激励教育网站建设热情和引导教育网站改进的功能。从评价方法而言,教育网站的评价和许多教育评价一样,也分定性评价和定量评价。不过,大多数研究都侧重于教育网站的定量评价,其中包括设计教育网站的评价指标体系。如:彭绍东和周鸿彬从教育性、技术性、艺术性、开放性、效益性、发展性等方面提出了教育网站评价的三级指标体系[2];周梅群和吴华在所提出的教育网站评价原则的基础上设计了包含内容、技术、效用和发展性四大要素的评价指标体系[3]。尽管这些指标体系也可以用于对教育网站进行定量评价,但这些指标都是人工的评价,缺点也是很明显的。“它受评价者的主观条件影响较大,也会耗费非常大的人力、物力和财力。为了使网站的评价更具有客观性、经常性和持续性,降低网站评价的成本,需要寻求新的评价方法[4]”。其中,流量分析就是很好的一种。流量分析可以对教育网站的运行和访问情况进行详细周全的分析,帮助管理者掌握服务器每天的吞吐量,客观地了解网站的访客来源,知道各页面的访问情况,并据此评价网站的运行状况。同时,还可根据相关信息来改善网页的内容和质量、提高内容的可读性,跟踪用户的行为。总之,流量分析可以作为评价教育网站的一个有效手段[4]。
在教育网站的流量分析中,Google Analytics是一款智能、友好的网站访问统计工具。不同于通过分析Web服务器的日志文件获得访问记录的统计方法,Google Analytics则通过给网站页面添加统计脚本程序获得访问记录。该工具是Google众多免费服务中的一种,操作简单,但功能强大。其特点有智能、高级细分、灵活定制、电子商务跟踪、目标、移动跟踪、数据导出API、高级分析工具等[5]。它专注于访客行为,从用户体验的角度评价网站运行方案,掌握访问者需求,发现网站存在的问题,以此来改善网站设计方案,提高网站服务品质[6]。此外,它还凭借清晰直观的使用界面、高效的分析速度和准确的数据,越来越受到网站管理者的青睐。值得一提的是,Google Analytics可以和教育领域使用广泛的开源软件Moodle无缝整合,进而可以对Moodle网站的流量进行各种统计与分析。以下我们以“教育技术学开放教育资源”这一Moodle网站为例,在简单介绍配置Google Analytics跟踪代码的基础上,着重分析Google Analytics在定量评价教育网站时的特色和价值。
1 “教育技术学开放教育资源”网站及流量跟踪代码的配置
1.1 “教育技术学开放教育资源”网站简介
“教育技术学开放教育资源”网站(http://elearning.snnu.edu.cn)由马红亮创建于2011年3月,主要定位于设计、开发、传输以及应用国内外优质的教育技术学领域的开放课程。目前,该网站已经收集整理了英国开放大学、博尔顿大学,美国犹他州立大学、加州大学欧文分校、麻省理工学院、密歇根大学、新泽西理工学院等国外高校的教育技术学领域的数十门开放课程,课程内容涵盖教育技术学专业的多个科目,而且已经完成了10余门课程中文版的制作。除此之外,网站还有数门有特色的原创性的开放课程,例如:2011年秋季学期华南师范大学焦建利教授、宁夏大学张玲教授与陕西师范大学马红亮博士合作共建的《教育技术学基本理论研究》开放课程。该网站是用Moodle 2.0建立起来的,并不断通过CVS更新Moodle版本。
1.2 Google Analytics跟踪代码的配置
首先,注册Google Analytics并获取其Javascript跟踪代码,然后复制该段跟踪代码。如果是一般自己编写的网站,则通常做法是在要跟踪的每个网页上,将该跟踪代码段粘贴到网页底部的</body>标记之前,且紧邻该标记。在利用开源软件Moodle 2.0建立的教育网站中,跟踪代码的配置则相对简单。首先以Moodle管理员身份登录,然后打开“网站管理”页面,在“外观”菜单下的“附加HTML”中,将复制的Google Analytics跟踪代码添加到head标签内,这样就可以跟踪Moodle网站每一个页面的访问情况。当查看Google Analytics的流量分析报告,则登录Google网站即可。
2 利用Google Analytics分析评价“教育技术学开放教育资源”网站
“教育技术学开放教育资源”网站是从2011年8月23日开始使用Google Analytics进行流量统计的。Google Analytics生成的报告分为信息中心、智能、访问者、流量来源、内容和目标六个类别。报告的形式包括图表、饼图、表格等,用户可选择查看任何存在数据日期范围内的报告,也可以比较两个不同日期范围内的数据[7]。这里我们选择了自该起始之日至12月31日为期四个月的数据,结合Moodle网站的特点,分别从网站受众群体、网站内容及流量来源三个方面的重点指标对该网站进行分析和评价。
2.1 网站受众群体分析
2.1.1 受众群体概况分析 网站受众群体概况分析如图1所示。
图1 受众访问概况
由图1可以看出,该网站的访问次数(用户访问网站的总次数)已经超过15 000次,6 000多的惟一身份访问者(访问网站的惟一身份访问者的总数),高达13万的浏览量(访问者在网站上浏览的网页总数),8页多的每次访问页数(每次访问的平均网页浏览量),10多分钟的平均网站停留时间(每位访问者平均在网站上停留的时间),以及60%多的回访次数。所有这些数据说明该网站资源的开放性还是取得了一定的实际应用效果,某种程度上还是不错的效果(与网站的自身预期目标相比)。这里,我们有必要指出的是,“教育技术学开放教育资源”网站不同于一般Moodle网站用密码将访客拒之门外的做法,而是将网站上所有的课程资源开放给所有用户(包括访客),用户不用登录也可以自由浏览网站的所有内容。我们认为,这是该网站在短短四个月中取得上述成绩的关键。然而,从图1中30.55%的跳出率(单页访问所占的百分比),我们可以看出,该网站建设还存在一些不足,内容的质量和吸引力还有待进一步提高。
2.1.2 受众群体地域分布 受众群体地域分布如图2所示。
图2 受众国家/地区分布
从图2可以看出,“教育技术学开放教育资源”网站的访问者虽然绝大多数来自大陆(简体中文语言访问者约占98%),但还是有少量的来自中国澳门、香港、台湾地区的访问者,另外,也有美国、加拿大、英国、马来西亚等20多个国家的访问者(英语语言访问者约1%)。进一步深入分析发现,来自国外访问者的每次访问页数、平均停留时间均低于网站的平均值,而跳出率则高于网站的平均值。例如:有的国家的访问者页面访问数为1,有的网站停留时间为0,有的跳出率为100%。这些数据给我们的导向是,“教育技术学开放教育资源”网站建设应该从初期的以拷贝国外英文版开放课程为主的路线,调整到以设计、开发和应用原创性开放课程或本地化国外开放课程为主的路线上来。理由很简单也很充分:因为该网站的绝大多数用户还是在国内,尽管该网站的语言也设置有英文。
图3 受众的城市分布图
进一步分析中国大陆访问者的数据,我们得到图3的数据。这些数据说明,目前“教育技术学开放教育资源”网站的访问用户主要集中于西安、广州、银川这三个城市(合计访问次数占69.33%)。而出现这一情况的原因在于:①本学期网站中的一些开放课程主要由本文的第一作者应用于陕西师范大学的本科生和研究生教学中,学生在面授学习过程中需要访问指定课程中的教学资源,并参与指定的网上活动;②本学期网站中三校合作共建的开放课程—《教育技术学基本理论研究》主要由华南师范大学、宁夏大学以及陕西师范大学的教育技术专业的硕士研究生(共计约90人)以混合式学习的方式学习。另一方面,图3的数据还说明,网站的用户城市分布也有非常广泛的特点,高达265个城市(含上述三所城市),且有超过30.67%的访问次数来自于上述三所城市之外的许多城市。这些数据则能进一步佐证网站课程资源开放性所带来的实际成效。2.1.3 受众群体行为分析 受众群体行为分析结果如表1所示。
表1 覆盖率和回访频次的部分统计结果 n(%)
表1列出了访问者在四个月中访问我们网站次数在9次及以上的访问次数和浏览量。综合该表的数据可以看出,回访频次比较高的用户访问网站的次数和浏览量还是取得了一定的成绩。进一步查看回访者的地理分布发现,虽然主要还是集中于西安、广州和银川(合计占87.45%),但还是有12.55%的回访用户来自于其他137个城市,而且有些城市的回访用户网站平均停留时间还在1-2 h,远远高于网站的平均停留时间。这说明,尽管网站的教学对象主要集中于西安、广州和银川,因此容易产生大量的“外在强迫性”的回访用户,但是网站资源还是由于内在的吸引力吸引了许多来自其他城市的非强迫性的回访用户。另外,从表2中,我们也可以看出,网站资源对用户的吸引力(含外在和内在)还是取得了一定的成绩。
表2 访问者参与度的部分统计结果 n(%)
2.1.4 受众浏览器和操作系统分析 访问用户所用的浏览器中Internet Explorer占84.91%,Chrome占10.02%,Firefox占3.75%。此外,还有少量移动用户所使用的浏览器,其中Android浏览器所占比例较大。在Internet Explorer中,比例最高的为8.0和6.0用户,分别占60.96%和26.79%。在这些数据中,最值得留意的是这26.79%的IE6.0用户,因为Moolde自2.0开始,标准的主题(theme)已经不支持IE6。但值得庆幸的是,网站创建者在使用Moodle 2.0之初,就已经为该网站安装并自定义了一种兼容IE6的主题,并一直沿用至今。看来这种做法还应继续沿用。
2.2 网站内容分析
2.2.1 网站页面访问概况 网站页面访问概况如表3所示。
表3 页面类型的访问情况
表3显示,该网站访问量最大的页面还是课程类型的页面,包括页面路径级别1中的“课程资源及活动(/mod/)”和“课程首页(/course/)”,而这也符合Moodle课程管理系统的特点,同时也是网站课程开放所带来的成效。尤其是用户不用注册或登录即可浏览网站所有课程的所有内容,包括首页、资源及活动,这一特点也就奠定了“课程资源及活动”在各类页面中浏览量最高的地位。另外,从表3中,我们也可以看出,网站博客(/blog/)、用户信息(/user/)和短消息(/message/)是除了课程之外用户还比较关注的内容。尤其是网站博客也获得了9174的浏览量,而博客系统的启用时间要比网站启用 Google Analytics晚一个月。这给我们的启示是,网站博客系统是除了课程之外,能够进一步促进学习社区形成的一个不可忽视的因素。其次就是网站的短消息系统也有助于形成一个网上学习社区。
再进一步分析课程资源及活动的浏览量,我们发现论坛(/forum/)、网页(/page/)、文件(/resource/)是课程资源及活动中浏览量最大的(如表4所示)。
表4 页面路径级别2(课程资源及活动)的访问情况
从表4中可以看出,论坛的浏览量达2万多,占课程资源及活动总浏览量的50%以上,这说明访问者最为关注的并不是教师发布的各类资源(含网页和文件等),而是课程论坛中的师生、学生之间的互动,也从侧面印证了网络更有利于形成以学习者为中心的学习环境。进一步分析论坛的浏览量,发现《教育技术学基本理论研究》的课程论坛(4 340次)最高,其次就是整个网站的公共论坛“教育技术学论坛”(1 200次)以及《学习科学与技术》(一门远程教育课程)的课程论坛(882次)等。这说明,这几个论坛的实际应用价值和功能发挥较好。进一步分析网页的浏览量,发现浏览量排名第一的是《教育技术学基本理论研究》的“每周阅读材料和作业”(448次),另外网页浏览量排名第三、第四、第七的分别是该网站对教学设计类、远程教育类、电子游戏与教育类课程的汇总目录页面(分别是284次、215次、148次)。这说明这些页面对用户的吸引力还是比较高的。进一步分析文件的浏览量,发现访问者浏览量排名前十的绝大多数为《教育技术学基本理论研究》的音频、视频文件,其中的音频文件均为焦建利教授的授课录音。这说明在所有开放课程中,这门课程的音视频文件对用户的吸引力还是比较强的。然而,表4中较高的跳出率则说明,网站论坛、网页以及文件对用户的吸引力还有待进一步加强。
2.2.2 课程页面访问情况 课程页面访问情况如表5所示。
表5 页面路径级别2(课程首页)的访问情况
由表5页面路径级别2中的数据可以看出,在课程首页类访问流量中,本学期教学中实际应用的10门课程(Moodle中创建的课程,与学校教务安排的课程并非一一对应关系),其浏览量均排在前面。而在这10门课程中,三所高校合作共建的《教育技术学基本理论研究》浏览量和惟一身份浏览量均最高,其原因应该与该课程的两大特点有关:①三所学校选课学生数量比较多(共计有90多名),因此课程的潜在访问用户就较多;②课程中的在线阅读任务和在线互动任务比较多,因此需要学生经常访问课程。此外,也有可能与该课程的主持教师焦建利教授的个人影响力和感召力有关。再进一步通过高级过滤器来分析《教育技术学基本理论研究》这门开放课程的流量,我们整理出表6中的数据。从表6中可以看出,尽管这门课程是三校合作的一门课程,但在华南师范大学的应用情况最好,总浏览量比银川和西安两地浏览量之和还要高2倍,而且跳出率也最低。另外,该开放课程除了被三所学校的学生访问外,还有其他很多城市的1 000余浏览量,平均页面停留时间也较长,但跳出率较高(高达75.35%)。这说明目前该课程尽管只用于三所高校的研究生教学中,但由于其开放性,已经对其他地区的用户产生了或多或少的影响。然而,这种或多或少的影响力可能只限于该课程的个别页面,因为经进一步分析发现,其他城市访问者的流量以课程首页居多。
表6 《教育技术学基本理论研究》开放性的效果
2.3 网站流量来源分析
“教育技术学开放教育资源”网站的三种流量来源数据具体是,直接流量占59.73%,搜索流量占28.65%,引荐流量占11.63%。在直接流量中(包括直接在地址栏中输入URL或者点击收藏夹中的书签),除了网站首页最高(访问次数百分比占64.3%)之外,其余直接流量则相当分散,包括《教育技术学基本理论研究》、《教学系统设计》、《教育技术学文献选读》等在教学中应用的课程等。这些也许正是以课程为主的Moodle网站的特点。进一步查看直接流量的访问者类型,发现回访用户占大多数。在搜索流量方面,通过关键词搜索访问本网站的新访问次数百分比为59.95%,高于网站的平均值近20个百分点,这说明搜索流量对该网站新用户访问量贡献较大。但是每次访问页数、平均网站停留时间均低于网站平均值,跳出率高于网站平均值,这说明网站的内容相关性或质量与搜索用户的期望还有差距。另外,在多达2 000多项关键词中,包含“moodle”的关键词所带来的访问次数占搜索流量的18.48%,这说明《Moodle应用》这门开放课程在整个网站中所占据的地位和作用不容小视,应进一步加强建设,提高质量。在引荐流量中,我们发现在新浪博客中,有多个博客地址引荐该网站,这些博客既有学习该网站课程的三所学校学生的博客,也有其他学校教师的博客引荐(如中山大学现代教育技术研究所王竹立教授对本网站学生博文的一些引用),还有其他学校学生的博客(如武汉、十堰),而引荐的目标网页以“教育技术学开放教育资源”网站首页为主。
综合以上三大方面Google Analytics的数据分析,我们可以看出,目前“教育技术学开放教育资源”网站尽管在应用方面取得了一些成绩,但总体还处于发展和提升之中。在应用方面的成绩主要表现在:上万的访问次数、十余万的浏览量、十分钟左右的平均网站停留时间,以及受众群体地域分布的广泛性、回访用户占大多数。总体还处于发展和提升之中主要表现在:非课程直接教学用户的自然访问量还不够多,网站的跳出率、课程资源及活动的跳出率以及课程首页的跳出率均比较高,网站的引荐流量所占百分比也不高等。另外,作为一个原先定位于推广国外优秀开放课程的网站,上述各种Google Analytics数据却说明这种定位并不成功,因为目前我们并没有发现任何一门国外优秀的开放课程的各种流量数据高于我们自己的课程,即使我们在网站首页做了颇为吸引力的推荐。这也许印证了Morgan和Carey的论断:“在大多数情况下,为了促进学生有效地学习开放课件和开放教育资源,必须要将这些开放课件和开放教育资源融入到一定的课程体系中,使学生们能够在学习这些课程的过程中得到教师的指导,并能获取相应的学分,如果学生想获得某种学术资格或学位的话[8]”。此外,也进一步印证了马红亮等人的论断:“英美高校的开放课程、开放教育资源以及开放课件在提高国内研究生或者本科生的教学质量方面具有潜在的巨大作用,然而在实际应用中还需要进行本地化的改造,才能将这种'潜在'的作用真正转变为'实在'的作用[9]”。
3 结论和启示
通过Google Analytics在评价“教育技术学开放教育资源”网站的具体应用中,我们可以得出以下几点结论和启示:
①Google Analytics在定量评价教育网站方面,可以生成异常丰富的流量数据报告,这些数据有助于我们客观而公正地分析和评价教育网站的实际应用情况。尤其是Google Analytics能以多种维度、多种层次组合式地自动汇总出网站管理者所需要的真实统计数据,有助于教育网站管理者全面而深入地分析和评价网站的访问情况,进而为网站改进提供有价值的定量参考数据。对教育网站的评价有直接借鉴意义的主要指标有:网站使用率(访问次数、浏览量、每次访问页数、跳出率、平均网站停留时间、新访问次数百分比),流量来源(直接流量、搜索流量、引荐流量),地理位置等。
需要注意的是,在面对Google Analytics提供的异常丰富的数据进行分析和评判时,往往需要综合应用多个维度、多个层次的数据进行综合分析,而且这些不同维度和不同层次的数据相互之间往往是有联系的,可以相互比较、相互印证,这一点是我们分析这些数据时应该把握的关键原则[10]。我们应该避免仅仅从某一个数据或某一个维度的数据做出评价。在分析这些数据时,我们还需要结合网站的具体目标、具体定位以及具体内容等,只有这样才能比较客观地做出正确的评判。
②在许许多多的Google Analytics统计数据中,网站内容维度,尤其是其中的网页深入分析子维度,可以对网站不同页面的各种流量数据(包括浏览量、停留时间、跳出率等)进行统计汇总,这些数据对于教育网站的评价和建设具有格外重要的价值。在分析网站内容维度的流量时,各种不同次级维度的设置以及高级查询功能的配置,能获得一些教育网站更加具体和深入的访问数据。对于以课程为主的Moodle网站,Google Analytics能够统计出不同课程的各种流量数据以及同一课程的各种流量数据,这些数据对于定量评价各门课程建设情况具有非常重要的价值。然而,要全面评价教育网站内容的建设情况,还需要进一步结合人工的定性评价或定量评价,甚至用户的问卷调查以及访谈。
[1]袁振国.当代教育学[M].北京:教育科学出版社,2004: 260-262
[2]彭绍东,周鸿彬.教育网站的类型与评价[J].远程教育杂志,2002,(6):54-55
[3]周梅群,吴华.教育网站评价指标体系设计之研究[J].电化教育研究,2004,(8):53-57
[4]陈向东.基于流量分析的教育网站评价[J].现代远距离教育,2007,(1):15-17
[5]Google.Google Analytics(分析)首页[EB/OL].http:// www.google.com/analytics/2011/2011-12-31
[6]Brian Clifton.流量的秘密:Google Analytics网站分析与优化技巧[M].钟镭,译.北京:人民邮电出版社,2010:3
[7]王玥,周玲,李博.利用Google Analytics追踪科技期刊门户网站流量数据[J].中国科技期刊研究,2011,(2): 248-252
[8]Morgan T,Carey S.From Open Content to Open Course Models:Increasing Access and Enabling Global Participation in Higher Education[J].The Inter Rev of Res in Open and Dis Learning,2009,10(5):1-16
[9]马红亮,Li Y,Powell S,等.引入国外开放课程构建网络学习新模式[J].电化教育研究,2011,(9):68-74
[10]陈向东.一种新的教育网站评价方法:链接分析[J].中国电化教育,2007,(7):64-67
App lication of Google Analytics in evaluating educational websites: A case study of Open Educational Resources for Educational Technology
Ma Hongliang,Meng Qingxi
Department of Educational Technology,Shaanxi Normal University,Xi'an 710062
By taking the Moodle-based website Open Educational Resources for Educational Technology and using Google Analytics,this paper makes a multi-dimensional analysis of user group,contents and information flow of the website.It concludes that(1)Google Analytics can provide various types of website information flow data for quantitative evaluation of educational websites,but comprehensive evaluation from multiple dimensions is very necessary;(2)Among the rich data provided by Google Analytics,analysis of the website's content is very valuable for course-centered educational websites.
Google Analytics;educationalwebsite;Moodle;open educational resources; evaluation
G434
:A
:1004-5287(2012)04-0415-06
2009年教育部人文社会科学研究西部和边疆地区青年基金项目(09XJC880002);2011年陕西师范大学教育教学改革研究一般项目“国内外优质课程教学资源共享研究”的阶段性成果。
2012-03-12
马红亮(1975-),男,陕西华县人,博士,副教授,硕士研究生导师,主要研究方向:网络远程教育、教育网络游戏。
孟庆喜(1988-),女,河南台前人,硕士研究生在读,主要研究方向:网络与远程教育。
电话:15353554521;E-mail:mengqingxi1988@126.com