SMH的学校排名都是垃圾

patrickzhu

My School网站更新以来，英文和中文媒体对小学中学的NAPLAN成绩排名都很关注，其中Herald报业集团和新足迹集团最为起劲，哈哈哈。

在大家忙排名次的时候，听听Maralyn Parker是如何来泼冷水的。。。

简单介绍下这个女人，她是Daily Telegraph的教育专栏记者，讲话以尖刻闻名。
她曾经做过老师，公立教育的大粉丝，她支持My School网站，支持对教师制度进行改革，但是强烈反对媒体排名，教育方面支持联邦工党政府，但是经常骂教师工会，联盟党的教育政策也经常被她骂的狗血喷头。

红烧鸡翅

谁用谁知道

patrickzhu

League tables based on NAPLAN are nonsense  
Maralyn Parker
Wednesday, February 29, 2012

她文章的标题是 - 基于NAPLAN成绩的学校排名毫无意义

My School网站的数据更新以来，本周基于NAPLAN成绩数据的各种学校排名层出不穷，我这里要说，媒体报纸的每一种形式的排名都是垃圾。请各位不要愚蠢到要去相信这些排名，最适合这些排名的地方只有一个 - 垃圾桶。

相比于NAPLAN的各科考试中只用40道考题的成绩结果来试图标识一个学校的做法，根据这些成绩来进行排名的人犯的错误更大更为严重。

现在媒体们做出来的各种排名里最愚蠢的错误就是忽略“幅度误差”（margin of error）的影响，My School 网站每个学校的NAPLAN成绩下面都很清楚地标注了这个幅度误差值。

标注幅度误差的原因是因为，无论你是否很在乎地或者不在乎NAPLAN的考试成绩，这个值都很关键。一个学生的每一项考试成绩结果都会有一个幅度误差。

patrickzhu

具体解释下幅度误差是怎么回事。
如果让学生们相同的或者相似的考试再考一次的话，他们可能会得到很不一样的最终成绩。即便他们的知识和所掌握的技能根本没有变化，但是相比于其前一次考试，他们再次考试的成绩可能会高一些或者低一些。学生们参加同样难度考试多次考出来的最高分和最低分之间的差值就被称为“幅度误差”。

这可不是什么凭空的猜测。对于学校成绩的评价幅度误差是可以用数学的方法计算出来的，My School网站上对于每所学校的每次NAPLAN考试都有幅度误差值。

对于规模小（学生人数少）的学校来说，这个幅度误差可能会高的离谱，所以这些学校的NAPLAN成绩就不应该用来评判这些学校学业的好坏。但是所有学校的平均成绩，甚至那些规模大的学校，都有一个幅度误差，这个幅度误差会让你在试图给这些学校根据考试成绩排名的结果造成差异。

只需要一点点成绩分数的差异造成学校排名的不同，但是学校之间有平均30分或者更多的成绩差异是很容易就被幅度误差的影响而覆盖了（意思是幅度误差至少可以造成学校间30分之间的成绩差异）。

但是这些原因都无法阻止本周Sydney Morning Herald还是公布了整个新南威尔士州前十名小学的排名。Sydney Morning Herald的排名只是基于每个学校5年级学生的平均成绩而作出的。报纸没有告诉我们（使用5年级的数据）有什么原因。而学校的3年级，7年级和9年级的成绩可能会和这个5年级的排名很不一样。

但是当我了一下在阅读科目前十名小学的幅度误差值，我可以说这前十名的成绩差异都已经被幅度误差的影响覆盖了。
上面这句话的意思是，你可以把阅读科目的前十名小学排名打乱，按照你想要的排序来任意排列次序，没有关系。这样的学校排名因此就毫无意义了。其他科目排名也差不多，一样毫无意义。

patrickzhu

后面还有比阅读科目的前十名排名更蠢的事情。

在悉尼（Inner Sydney）的Montessori School是一个相当小的学校，只有144名学生，在Sydney Morning Herald阅读科目的排名里排在全州第三。而这所学校5年级的阅读科目考试成绩结果的幅度误差的跨度居然有一整学年之大，统计学家看到这里大概会昏过去。

这就意味着，如果给这所学校5年级学生提前一天考一场阅读，然后在当天考阅读一次，然后在后一天再考阅读一次，学校统计出来的平均成绩可能会要么突然落后于本次阅读标准结果6个月，要么可能会突然领先本次阅读标准结果6个月。

现在你来看，说这个学校的阅读成绩是全州第三名，你觉得有意义吗？

patrickzhu

还有更离谱的排名，那就是Canberra Times基于NAPLAN成绩的坎村学校排名。

坎村的一个伊斯兰学校Islamic School of Canberra也是一个小学校，这个学校在7年级的的写作科目上名列所有首都学校的第一名,但是这个学校7年级写作成绩的幅度误差跨度有2个成绩级别（BAND),也就是说这个学校的学生成绩误差有超过两个学年。

所有这些数据都不是老师们的秘密，这些数据读清清楚楚明明白白的在My School网站上。

更糟糕的是，Islamic School of Canberra这所学校的7年级学生里有44%的学生没有参加NAPLAN的写作考试。所以这个第一名成绩是有56%学生的平均写作成绩取得的。

parramatta

其实家长也不完全只看这个排名，就是看看平时大家讨论的好学校，在这个排名是个什么位置， 差不多就行了. 偏门没听过的学校也会慎重选择的。

juneluo

什么东西都有追捧和反对的声音的。
个人觉得，这个排名也是能起个参考作用的，100 名之内的肯定是好学校，我想没人会说这1000多名的学校只是学生发挥不好的偏差吧。

Origami

2百名开外的教会学校，icsea极高，还能选不？

juneluo

昨天还在和朋友聊这个问题，她女儿的学校是local的教会学校， 200多名，她觉得很好，小学校对孩子关注多，校风好，主要是离家近，她是可以去离家较远的排名20多的大学校，但孩子就要送afterschool care 了，竞争也太激烈。所以她还是觉得local学校好，所以对200多的排名很满意的。 我也很赞同。

jasmineh

为什么我的想法是小学排名一点都不重要，中学还算重要。是我不够虎妈吗？

aus2005

NAPLAN对家长的价值确实没什么，不要相信。好的学校不反映出来。 但是它一定要有，因为这个是目前澳洲唯一一个可以push老师更注重教学的考试成绩。这也是老师很反对的原因。希望这是一个契机，提升澳洲的教学质量。

粉猪妈妈

任何排名都是垃圾

没排名前家长怎么选学校的

[ 本帖最后由 粉猪妈妈 于 2012-3-2 14:28 编辑 ]

绿茶

这个东西有好有坏。
没有之前，大家都是到“听说”好的学校，可是到底怎么样都是进去才知道。
有了这个，就一定能找到满意的学校吗？
即使进了好学校，还要额骨头高，碰到好老师。

jasmineh

没排名的时候我们道听途说。

WTFAUS

前多少名大家可以不用太在意。
但后十名的学校，能不能说，肯定是很烂的？

patrickzhu

原帖由 WTFAUS 于 2012-3-2 14:39 发表
前多少名大家可以不用太在意。
但后十名的学校，能不能说，肯定是很烂的？

后十名的学校也有margin of error，不过后十名的学校和华人无关

dlvp1234

原帖由 jasmineh 于 2012-3-2 14:21 发表
为什么我的想法是小学排名一点都不重要，中学还算重要。是我不够虎妈吗？

小学相对不太稳定，特别一些人数少的学校，但中学就靠谱多了，传统名校一般都会排名不错

dlvp1234

什么统计都会有误差，排名也是给有兴趣的人看的，但my school确实给家长一个平台去比较和选择学校，也给一些混日子的校长和老师一点压力。

粉色猪猪桃丽丝

小学阶段赶上个好老师最重要，会考虑孩子去私校或者教会学校，一般老师都比较好，要求也严格。公立学生太多了，尤其98%非英文背景的，很难想象会有什么好老师在那里。

ruru2008

平心而论，我满赞同标题的，虽然我的儿子们都在排名很前面的学校。教育是必须学校与家庭并重的。一个排名很前面的学校，师资和设备都很好，挑选进去的学生也都很聪明，但是学生的家庭教育很差，这一切都是枉然的.......这就是，我小儿子现今学校的隐忧。
这个学校在内西区很受到追捧，这几年更是一位难求，今年学校因为申请的人又多了，所以又加收。结果造成周围交通恶化，Double parking 给孩子下车的情况越来越多，家长抢起车位来，很是粗鲁。有天，当我们走人行道过街时，居然有车不让路，急速从我们面前做个Ｕ turn 要抢对街的车位。学校里挤满人，对过路人，也不会留通道....种种现象都显示出，这个学校在退步，学生的家长素质也在往下降。
这样的学校，即使排名很前面，说实在的，如果有得选择，我们想离开！
排名，其实是浮云！

[ 本帖最后由 ruru2008 于 2012-3-3 17:09 编辑 ]

SLCOW

如果那学校每年的排名都好，就说明问题了

vont

记得以前讨论学校的时候，朱版坚持认为，一片粉红的学校不能上，因为低于全国平均水平，当时我的女儿上得就是这样的学校，CHATCHAT的女儿上得好像也是这样的？不过朱版认为是特例。
我后来比较了一下我女儿的学校，和一个口碑不好的地区的学校的NAPLAN成绩。那个学校的成绩不少是淡绿的。
如果一个不熟悉这些地区的华人家长来选，是不是觉得绿色的肯定会比粉红色好的多？
但事实上，那所学校差到上过报纸，孩子带摇头丸去学校。我还见过那所学校的孩子EXCURSION，有孩子顽皮到老师都控制不住。
所以我觉得学业排名对小学来说，意义不是很大。
我倒是觉得那个ICSEA比较重要。

stockton

个人感觉这个叫Maralyn Parker的，偏激的过分。
文章读到最后，似乎一味在强调她很懂统计，然后得出“学校排名毫无意义”的“垃圾桶”结论。