Certification Examination Development 认证考试开发
http://www.computer.org/certification/ExamDevelopment.htm
软件开发职业认证(CSDP)考试由Chauncey国际集团(CGI),一个新泽西普林斯顿的教育考试服务中心(ETS) 的子公司开发。
IEEE计算机协会的确CSDP考试满足公正性,有效性和可靠性的考试工业标准。这些标准被确定如下:
·一个考试是公正的,仅当它的内容既不偏好也不歧视任何个人或团体时,不管理由出自种族背景,地域,习惯,或者其他人口统计标准;
·当考试能精确反映出必需胜任的知识和技能时,就是有效的;当考试在不同时期能产生一致的结果时,考试是可靠的。
严格的考试开发过程经3 年完成,并且包括以下各步骤:
Job Analysis作业分析
作业分析过程提供一个行业公认和系统的步骤,识别确认作业绩效范围和完成作业必须的知识和技能。由作业分析得出的信息,提供了开发考试规定的基础。作业分析的主要步骤是:
A. 计划会议:会议讨论待分析的任务和知识领域。
B. 场约谈:与有选择的专业人员进行少量电话会晤,以帮助发展任务/ 知识草表。考试开发人员( CGI)准备任务草表,用作为第一个作业分析工作委员会会议的基础。
- 作业分析工作委员会会议:一个作业分析委员会由10-12 人员组成,我们CGI考试开发人员引导第一次委员会会议,审核并修正任务和知识草案目录。委员会也确定评分等级,措词,格式和要收集的统计数据。
D. 调查方案开发:调查草案在会议结束时分配给委员会,要求委员会成员审核调查方案,并且返回他们的意见。
调查草案也被分配给少量β调查参加者,被β组认为适当的修改,应在最后分发前完成。
E. 调查的返回和统计分析:调查被分配到要求的参与者,返回调查的数据分析由考试开发人员完成。当足够数量的调查(至少300-400)被收到并且分析时,准备一份报告提交作业分析委员会评估和讨论。
Examination Specifications考试要求说明
按作业分析得出的信息开发考试要求说明,说明成为定义最后考试内容的蓝本,
试题开发就参照这些说明。考试说明开发的主要步骤是:
- 考试要求说明会议:一个由10-12位主题内容专家参加的会议开发考试内容的权重,会议包工作业分析结果的说明和用来指导考试开发活动的考试要求说明的介绍。
- 考试说明和最后报告:在CGI,一份考试说明决定报告,以及记录作业分析活动和结果的一份最终报告文件由我们的考试开发人员提供。
Examination Item Development考试项开发
考试开发中的下一步是编写,编辑并且批准试题或者考试条项,被批准的条目被放进一个题库,试卷就从该库抽取开发。考试条项开发的主要的步骤是:
- 条项编写:考试的条项目由20-30个参加者在一个3 天的会议里编写,那些参与人员是在领域方面了解内容并且完全熟悉标准的实践工作者、督导人员与专家,条项编写者也反映了存在职业内包括性别、地域和主要的人种/种族群有关的差异。
考试开发人员向小组提出编写好条项的指导方针,参与者学习各种现有的条项以及和怎样制定好的条项。在研讨会上编写的条项由考试开发人员和研讨会参与小组审核,必要时对条项进行阐明和改进。
B. 条项审核:继条项编写研讨会后,考试开发人员首先审核和编辑全部条项,然后对风格、格式,逻辑和语法进行分类并存档。
条项再次被项目审核组成员审核。二天专题讨论会要求12-15 参加者,大约一半来自条项编写组,一半是新参加者,条项目在专题讨论会前送交参加者审核。在专题讨论会上,每个条项目都要仔细评估,以保证清楚、简明,并按考试大纲要求评测内容。
Examination Form Development考试试卷开发
被批准的条项根据考试要求说明被汇编成考试试卷。主要的考试试卷开发步骤为:
- 考试汇编:我们的CGI考试开发人员,从条项审核组批准的条项中选题,根据测试说明汇编考试试卷,开发人员保证试卷的内容包含适当的条项数量,覆盖考试的每一个指定的内容范围。
- 考试开发人员审核考试试卷:考试试卷被审核几次以保证它们达到质量和公正性的标准,考试条项的清晰度、风格对各类考试人员的适合性,以及精确性被再次检查,每份试卷被审核以确保试卷内条项相互没有提示或者重叠,还要进行敏感性审核,排除可能涉及的对任何团体,人种,种族或性别的偏袒,或者对考生语言的冒犯。最后,试卷被审核以保证选择的条项符合考试计划,答案和解答的平衡一致,方向和其他质量管理要求的明了。
C. 考试试卷的最后审核:在这个两天的会议上,12-15个参加者审核考试试卷,有潜在问题的条项被修定,并且任何被认为不适当的条项被替换。
会议之后,试卷被考试开发人员者最后一次审核,然后为计算机交付作准备。
Validation确认
有效性确认表示一个考试对要测试的东西实际测试的程度。对程序的总体确认和对试卷的特定确认,都是通过计算机考试中心试考以及建立一个通过线来进行。考试程序和试卷确认的主要步骤为:
A. β测试:被批准的考试试卷提交考试交付公司,有超过200人进行β版本的考试。β测试者是不同性别、种族和国籍的混合人选,应特别注意确保大多数考试测试者的教育和经验落在目标范围内。
B. 初级条项分析:由考试试开发人员进行初级条项目析,初级项目分析保证正确答案被使用和被检测,而不管条项是在什么情况下完成的,如逆反影响测试统计特性或非计划中的方式运作 ( 即,高分考生做错,而低分考生反而做对)。
C. 分数线会议:大约12-15个不涉及考试开发程序的人和考试开发者一起确定一个及格分数尺度,考试开发者通过统计过程连结一张试卷和其他试卷的及格分数线,分数线使用Angoff 方法被确定。
Approval 正式批准
考试开发文件(即,考试说明,分数线研究报告和成果总结) 被提交专业委员会审核和签字批准。当专业委员会签字批准,一个提案被提交IEEE计算机协会管理委员会(BoG)审核签字批准。当BoG签字批准后,它被提交IEEE理事会正式批准。
|