从2001年10月正式运营至今,CASEC考生累计人数为1,518,551人。(2015年3月底为止)
CASEC的考生人数
(累计数据及历年数据)
考生人数:累计 1,518,551人(2015年3月底为止)
托业®的估算分数,根据上述估算的CASEC各部分对应的托业分值计算。此外,估算分数和考生汇报分数的偏差在100点以内的回答人数,占整个调查人数的72%。
右侧的散点图显示CASEC总分与考生在CASEC考试时汇报的托业®成绩的关系,CASEC总分与考生汇报托业®成绩的相关系数为0.84。
按照考生的CASEC总分分10组:0 - 100,101 - 200,...,901 - 1000。
CEFR:欧洲语言共同框架,是一种在欧洲及其他国家用于描述外语学习者进步程度的标准体系,主要应用于语言的学习,教育和测试(欧洲委员会,2001),可将人的外语水平分为六个等级,从A1(初学者)到C2(最高级)。每个等级都是根据学习者的实际应用情况进行定义的。CEFR虽然由欧洲委员会开发,但现在不仅在欧洲,同时也在世界很多其他地方受到承认并被作为语言能力的衡量标准。语言教育从业者利用CEFR可以作为语言课程设计,教材研发,以及不同考试成绩之间的对比,例如托业和托福。当然CEFR对企业招聘和培训新员工也非常有帮助。
[操作流程]
根据CEFR推荐的关于语言学习,教育和测试的关联测试手册(欧洲委员会,2009),我们做了如下操作。
(1) Familiarization (小组成员了解并熟悉CEFR和相关的操作流程)
(2) Specification (对CASEC的测试项目和它与CEFR的关联性进行分析)
(3) Standardization Training & Benchmarking (培训相关成员对CEFR等级的基本认知)
(4) Standard Setting (对CASEC的项目与CEFR等级进行关联,制定不同等级间的明确界限)
(5) Validation (分析和测试整个流程和结果)
注: 由于Section 4考试问题形式比较难处理,目前不做的相关操作。CEFR的设计理念是根据实际生活中语言使用的熟练度进行分级的。而CASEC的Section 4的题型是,一段短文中空一部分内容,根据听到的内容进行填写,这种形式虽然能测试信息的听取能力,但不能算是实际生活中的模拟。因此关于这部分的处理方法目前还在研究中。
[结果]
Section 1 得分 |
CEFR 等级 | 说明 |
---|---|---|
195 ~ 250 |
B2 |
具备充分理解在个人,学术和职场的相关抽象和具体的内容的词汇水平 |
145 ~ 194 |
B1 |
日常生活的大部分话题都能有一定程度的整体和细节理解的词汇水平 |
75 ~ 144 |
A2 |
日常生活上以及在店里购物等的交流,对熟悉的状况和话题都能理解的词汇水平 |
0 ~ 74 |
A1 |
基本词汇,自己的身份背景,紧急需求和特别熟悉的话题都能理解的词汇水平 |
Section 2 得分 |
CEFR 等级 | 说明 |
---|---|---|
225 ~ 250 |
B2 |
具备充分理解在个人,学术和职场的相关抽象和具体的内容的词汇水平 |
165 ~ 224 |
B1 |
日常生活的大部分话题都能有一定程度的整体和细节理解的词汇水平 |
85 ~ 164 |
A2 |
日常生活上以及在店里购物等的交流,对熟悉的状况和话题都能理解的词汇水平 |
0 ~ 84 |
A1 |
基本词汇,自己的身份背景,紧急需求和特别熟悉的话题都能理解的词汇水平 |
Section 3 得分 |
CEFR 等级 | 说明 |
---|---|---|
225 ~ 250 |
B2 |
具备充分理解在个人,学术和职场的相关抽象和具体的内容的词汇水平 |
200 ~ 224 |
B1 |
日常生活的大部分话题都能有一定程度的整体和细节理解的词汇水平 |
145 ~ 199 |
A2 |
日常生活上以及在店里购物等的交流,对熟悉的状况和话题都能理解的词汇水平 |
0 ~ 144 |
A1 |
基本词汇,自己的身份背景,紧急需求和特别熟悉的话题都能理解的词汇水平 |
Council of Europe. (2001). Common European Framework of Reference for Languages: learning, teaching, assessment. Cambridge: Cambridge University Press.
The TOEFL iBT® reference scores were derived by computing equivalent range of TOEFL scores for each CASEC score based on the aforementioned computed result.
For CASEC scores of 450 points and under, however, the estimated TOEFL iBT® score range is defined uniformly as under 45 points. In the case of CASEC scores of 950 points or higher, the estimated TOEFL iBT® score is again defined uniformly as 100 points or over. This was done because few TOEFL® self-reported scores were available for candidates who obtained CASEC scores of 450 points or under and 950 points or over, so that the data was of low accuracy.
The scatter graph on the right shows the relationship between the CASEC total score and the self-reported TOEFL® score for CASEC candidates who reported their TOEFL® scores at the time of the test.
The correlation coefficient for the CASEC total score and self-reported TOEFL® score is 0.63.
Based on the CASEC total score, the candidates were divided into 10 groups: 0 - 100, 101 - 200,..., 901 - 1000.
The distribution of TOEFL® self-reported scores by group is shown in the box plot diagram on the right.
根据上述估算的CASEC各部分对应的托福分值算出托福iBT®的估算分数。
如果CASEC的总分等于或低于450分,则估算的托福iBT®分数统一定义为“45分以下”。如果考生的CASEC总分等于或高于950分,则估算的托福iBT®分数统一定义为“100分或更高”。这是因为CASEC成绩等于或低于450分,以及等于或高于950分的考生汇报的托福®数据很少,且数据的精度不高。
右侧的散点图显示CASEC总分与考生在CASEC考试时上报的托福®成绩的关系,CASEC总分与托福®考生汇报成绩的相关系数为0.63。
按考生的CASEC总分分10组:0-100,101-200,… 901–1000。
右图为各CASEC总分区间的考生汇报托福®成绩的箱线图。
题名: | 英語能力測定における CAT の適応例と効果測定(译:关于英语能力考试的CAT使用案例及其测评效果) |
---|---|
作者: | 林 規生(公司董事) |
期刊名: | 《测量和控制》出版物: Vol. 40(8) / pp. 572-575 / 出版日期: 20100810 |
题名: | Practical use of computerized adaptive testing in Japan -Development and operation of “CASEC” (译:计算机适应性考试(CAT)在日本的实际应用- “CASEC”的发展及运营-) |
---|---|
作者: | 林 規生,野上康子,前田かおり,池田 央 |
文件来源: | 28th International Congress of Psychology (ICP2004) Program Book. (译:2004年8月13日中国北京第28届心理学会暨论文发表会大会章程) |
标题 | 作者 |
---|---|
《項目応答理論入門―言語テスト・データの新しい分析法(译:项目反应理论入门—语言考试及数据的最新分析法)》 | 大友贤二(JIEM顾问) |
《項目応答理論[入門編]-テストと測定の科学(译:项目反应理论[入门篇]—考试及测评的科学)》 | 豊田秀樹 |
《現代テスト理論(译:现代考试理论)》 | 池田 央(公司董事兼顾问) |
《項目応答理論—基礎と応用(译:项目反应理论的基础与应用)》 | 芝祐顺 主编 |
《Applications of Item Response to Theory to Practical Testing Problems(译:项目反应理论在实际的测试问题中的应用) 》 | FREDERIC M. LORD |
《Item Response Theory: Principles and Application(译:项目反应理论:原理与应用)》 | Ronald K. Hambleton, Hariharan Swaminathan |
《Fundamentals of Item Response Theory(译:项目反应理论的基础)》 | Ronald K. Hambleton, Hariharan Swaminathan |
《Item Response Theory for Psychologists(译:心理学研究者的项目反应理论)》 | SUSAN E. EMBRETSON, STEVEN P. REISE |
《Computerized Adaptive Testing: A Primer(译:计算机自适应考试:入门)》 | HOWARD WAINER |