第一部分  背景介绍

随着我国经济社会的发展，金融服务业的水平得到了很大的提高。投资担保服务作为金融服务的一种，其专业化水平越来越受到各个方面的重视。

相比于证券、基金以及银行等金融行业，投资担保业一直没有统一的行业准入标准，尽管相关规定也要求了投资担保从业人员要达到一定的要求，但关于投资担保从业人员的职业标准一直没有形成统一规范的考核认证制度。

鉴于此，建立和完善我国投资担保业从业人员资格考试认证制度，既能够提高我国投资担保服务业的整体水平，增强竞争力，也符合我国金融行业规范化发展的要求。

该手册介绍了国家投资担保业从业人员资格考试命题管理与题库建设的详细流程以及相应的规范与要求。

第三部分  项目前期准备

一、            考核大纲

具体大纲根据最终的考试需求由相关专家编写。

二、            考核要求

本考试大纲规定了考试内容和考核要求。考试内容确定了考试的范围，考核要求分为了解、熟悉和掌握三个层次。其中要求“了解”的内容是一般重要部分，试题量相对较少；要求“熟悉”的内容是比较重要的部分，试题量适中；要求“掌握”的内容是最重要的部分，也是试题量多的部分。考试可采取机考或卷考两种方式，一律为闭卷。试卷总分为100分，60分及以上为合格。考试题型为选择题（单项选择题、多项选择题）和判断题。

三、            组卷规则

在与贵方沟通后确定。

四、            专家组织与建设

1.     专家团队构成

试题的开发应综合考虑其专业性、实用性和可测性。从专业的角度看，要符合相关学科知识领域的范畴，知识点准确明晰，理论论据充足，没有重大争议。从行业的角度看，要符合日常工作内容，贴近实际，不空洞，增加试题本身作为测量工具的有效性。同时，试题的命制还要符合测量学的要求，对知识点的分布，难易程度的掌握，以及试题本身各选项间的干扰关系，都要有准确的把握。

因此，命制与审核试题的团队就不能由单一领域的专家的构成，而应照顾到试题效果的各个方面。为保证试题最终质量，应从以下三个领域挑选合适的专家共同组成命题与审题的专家团队。

有以上三个方面的专家组成的专家团队可以在命题与审题过程中兼顾试题对于专业性、实用性和可测性的要求。

2.     专家选择标准

专家团队的构成确定后，从各个领域选择怎样的专家进行命题和审题的工作也同样重要，专家本身应具备较高的专业知识水平，对行业和工作内容熟悉，有命制试题与审核试题的经验，这样的人，才能命制出高水平的试题。

对命审题专家的选择可以综合考虑一下各标准：

Ø       工作内容与所命制试题内容相关。

优先考虑试题内容为其工作具体内容或学术研究方向的人。

Ø       实际工作经验

工作经验在5年以上的人对岗位工作会有更为深刻的理解和认识。

Ø       学历

相关领域高学历代表了对该领域更深入的研究，有助于把握学科知识点。因此，命审题专家团队的成员学历应该尽量达到研究生水平。

Ø       项目经验

    曾经从事过命审题的工作，对试题的命制和审核流程比较熟悉，会极大的提高命题和审题的效率，更容易理解试题难易程度，考核点分布等参数的使用。因此，要优先考虑有过命审题项目经验，尤其是有长时间项目经验的人。

Ø       专业背景及相关资质认证

    具有相关专业背景或资质认证的人，从专业角度上对相关学科领域更熟悉。应优先选择。

3.     专家职责

命题小组与审题小组均应有学科知识领域专家、行业专家、考试测量领域专家共同组成，在命题和审题两个环节从专业性、实用性与可测性三个方面对试题进行全方位的把握，同时，各领域专家的职责侧重点又有所不同。

Ø       学科知识领域专家：负责保证试题内容符合专业范畴，各考核点区分清晰，有充分的理论论据支持，内容及选项无重大争议，答案正确唯一，专业性强，具有权威性。

Ø       行业专家：负责协调试题内容，使之不脱离实际，与岗位工作联系紧密，保证考核结果可以对实际工作具有指导作用。

Ø       考试测量领域专家：负责把握试题难易程度、考核点的合理搭配。审查试题各选项的区分度，保证试卷的总体考核效果。

第四部分  命题管理

一、            命题开发总体流程及管理

1.     准备阶段

a)    分析客户需求，根据考试的性质及特点确定试题结构。

b)    制定命题流程、规范和要求（文档）

c)    制定各级命题、审题人员工作职责、任务分工和保密要求（文档）

d)    组织专家团队，建立命题小组和审题小组

e)    布置命题任务，将命题规范要求下发到命题小组和审题小组

f)    确定试题开发时间进度计划

2.     命题阶段

a)    命题小组根据命题大纲要求命制试题。

b)    大规模命制前应先提交样题由审核小组审定，把好命题第一关

c)    命题小组分散命题，制定评分标准，提供相应素材

3.     审题阶段

采用集中审题方式

a)    专家一审：集中审核试题是否符合命题要求，试题与所属考核点是否匹配，试题是否存在重大漏洞，答案设置是否正确，评分点是否合理。

b)    专家二审：要求审核人员必须亲自做一遍试题。重点审核试题题意是否清楚，是否能正常做出答案。试题难易程度与分值是否匹配。

c)    最终审核：要求审核人员亲自做一遍试题，审核各题选项设置是否符合区分度的要求。审核试题的文字及格式。

d)    审核人员应按要求填写相关记录文档。

4.     后续阶段

a)    制题

Ø       基于客户对考试形式的选择，若为计算机考试，则对试题进行制作，使之符合计算机考试的要求。

Ø  ,      制题完毕后，应对制作质量进行自检。要求制作后的试题忠实于原意，判分点正确，对有一定主观性的试题的答案判定应有一定的智能性。

b)    试测

Ø       组织相关人员对制作完成的试题进行测试。

Ø       测试人员工作内容或专业背景应与试题考核内容相符。

Ø       试测主要考察试题的时长、难易度与区分性是都符合要求。

c)    组卷

Ø       根据客户需求对试题进行组卷，考核点搭配合理。

Ø       所组试卷要符合考试时长的要求，根据通过率的要求合理分配难易度。

Ø       提供试卷题本对应的答案，主观题要提供详细的采分点。

二、            命题规范流程及工作要求

1.     命题规范流程

考试命题考试的质量生命线，是各项后续工作的前提基础和重要保证。考试命题规范流程将直接影响到组卷的质量。

考试命题，须务必遵循以下管理流程：

第一步，分析需求，确定考试的性质和特点

第二步，设定考试内容领域和考核标准，设定考试大纲，并制作考核细目表。

在题目编制时，需要充分考虑该行业人员的知识（理论知识和实践知识）水平和技能水平，设定合理的通过标准，并在此基础上设定考试大纲，以及制作出知识、技能与能力的具体考核点细目表。考试大纲的设计，应在不同考核点取得平衡，并反映出不同的考核要点，同时考虑考试时长。

第三步，设定考核形式和试题形式

根据制定出的考核点细目表，设定考试的考核类型以及设定试题类型（选择题，填空题，问答题，还是连线题）等等。

第四步，组织命题

组织由学科知识领域专家、行业专家组成的命题委员会。命题委员会负责确定出题总体方向和出题思路，负责制定命题流程、规范和要求（文档），制定命题、审题人员工作职责、任务分工和保密要求（文档），制定题目校对清单。

命题委员会下设命题小组和审题小组。小组成员包括小组负责人、命题人员、审题人员。

命题小组负责人组织命题委员会专家进行样题审定，把好命题第一关。之后，命题小组负责人选择命题人员，下发命题规范要求等规范文件，布置命题任务。

命题人员在指定日期之前递交题目及评卷参考评分标准，并附上相应内容素材。

2.     命题工作要求

a)   试题编写的总体要求

Ø       试题要符合考试的目的，内容取样要有代表性；

Ø       题目的叙述要简明易懂，既排除与解题无关的因素，又不可遗漏解题所依据的必要条件，要避免使用难懂的字词；

Ø       应有不致引起争论的确定答案；

Ø       测题之间互相独立，不能互相暗示；

Ø       题目中不可含有暗示本题或其他题正确答案的线索；

Ø       题目内容不要超出考生理解的范围；

Ø       试题要能区分出不同水平的考生；

Ø       避免双重否定的语法；

Ø       一个题目考察一个内容或一个概念；

Ø       题目的叙述要简明易懂，杜绝使用晦涩的语言；

b)   选择题编制的综合要求

Ø       题干的语言表达要简洁明确，适合考生的文化程度，没有主语或谓语的句子应避免出现，题干中尽量不要使用复杂的句子结构和不必要的修饰词；

Ø       选择题备选答案中的干扰项要有似真性，起到真正的干扰作用，即有诱答性；

Ø       选项数量4－5个，以减少考生的猜测性，减少随机误差，提高区分度；

Ø       所有选择题的选项数应保持前后一致；

Ø       一道试题尽量只考查一个知识点；

Ø       试题难度要控制在0.5左右；

Ø       选择项要简短、干练，每个选项中都重复遇到的字词最好放到题干中，这样做有利于考生把握考题的要领并做出反应；

Ø       选择项本身的语言表达不应给考生提供任何猜测的线索。如有“绝对”、“绝不”等词的选项一般是不正确的；正确选项和干扰选项的陈述应详细一致；

Ø       避免采用“以上都是”和“以上都不是”的选项，这样的选项一般是最后一个选项，很多考生看到前面的正确选项后会迅速作答，而不再去考虑后面的选项，从而选不对答案；

Ø       正确答案和错误答案的顺序要随机排列；

Ø       所有选择项都要有意义上的相近性。

c)   判断题编制综合要求

Ø       题干的语言表达要简洁明确，适合考生的文化程度，没有主语或谓语的句子应避免出现，题干中尽量不要使用复杂的句子结构和不必要的修饰词；

Ø       题干中避免采用“绝对”、“绝不”等绝对化词语，从而使考生考虑该判断题答案较大的概率为错误；

Ø       一道试题尽量只考查一个知识点。

d)   填空题编制综合要求

Ø       若某一个填空项有多个答案，需穷举所有正确的答案；

Ø       若该填空题有多个填空项，且这些填空项之间的答案无序，则应标明；

Ø       若某一填空项对答案的格式有特殊要求，请标注。（如：只允许填入数字、大写字母等）

e)   问答题编制的综合要求

Ø       题干的语言表达要简洁明确，适合考生的文化程度，没有主语或谓语的句子应避免出现，题干中尽量不要使用复杂的句子结构和不必要的修饰词；

Ø       提供详细的参考答案、评分标准、每题的总分，若需要计算机自动判分，则需要提供详细的采分点及每个采分点的得分。

f)   案例题编制的综合要求

Ø       题干的语言表达要简洁明确，适合考生的文化程度，没有主语或谓语的句子应避免出现，题干中尽量不要使用复杂的句子结构和不必要的修饰词，避免考生阅读题干所需时间大于思考问题所需时间；

Ø       一道案例题下至少包括2道小题；

Ø       所选案例保证不侵犯他人的权利，并避免引起民族、地区、性别、宗教信仰等矛盾；

Ø       选择项编写要求参见选择题编制要求。

g)   图片、视频、音频、flash题编制的综合要求

Ø       试题相关的图片、视频、音频、flash文件要求清晰，并保证不侵犯他人版权；

Ø       提供的图片为JPG格式、视频为WMV格式、音频为MP3格式、Flash为SWF格式， Flash题并提供源文件；

Ø       图片、视频、音频、flash文件大小控制在4M以内；

Ø       图片、视频等文件的命名与对应的试题编号一致。

三、            审题规范流程及工作要求

考试命题专家委员会审题人员在审核试题时必须着重关注以下内容：

1.    试题注重考察考生的知识理解和实际应用能力，题目设计应尽可能贴近应考人员的实际情况，反对偏题、怪题，不提倡刻意追求命题技巧。

2.    题目必须以考试大纲为依据，不得超纲。

3.    确保试题的技术准确性，文档格式统一、规范。

4.    题目文本和题目解题过程、答案应清晰、准确、简练、规范、完整，不得存在观点错误、提法陈旧、内容过时等问题。题目给定条件应充分，、无歧义、无错别字，使应考人员对题意理解准确，防止因误解而影响做答。

5.    每道题的分步分数、总分准确；每个部分、试卷的总分正确。

6.    解题所需要的素材（如文字，数据，图形，表格，声音，视频材料等）应尽量使用新的材料或经过改造的材料，避免照搬培训教材中的内容。

7.    题目内容应避免引起民族、地区、性别、宗教信仰等矛盾，题干所涉及的人名、地名、单位名称等要准确，当有可能出现版权纠纷时，不要确指。

8.    当有多个解题步骤时，要在解题评分标准中给出每一步骤的正确答案及得分。

四、            组卷规范流程及工作要求

1.     组卷的规范流程

     组卷是形成最终被考生使用的正试试卷的过程.是整个考试设计环节中最后一步,也是最关键的环节。考试组卷时,需要遵循以下规范化步骤:

第一步，确定试卷结构、设定组卷模板和计分方式

首先要根据考核内容与考核形式，确定试卷结构，并设定组卷模板。确定试卷结构，不仅要规范试卷的题型、题量还要为每类题型设定相应的计分方式。所谓组卷模板即从题库中抽题的规则与要求。组卷模板常用的规则参数为各考核点的题量与题型。

第二步，题库抽题构成试卷

根据设定好的组卷模板，从题库中抽取试题。根据题库中试题的数量，要调整组卷模板的参数数量。

第三步，试卷审核

在组成一份或多份试卷后，审题专家对试卷进行整体的审核是必不可少的环节。试卷审核不同于试题的审核，审题专家要对照试卷结构，对试卷的系统架构进行审核；之后，还需要认真对卷中每道试题进行再次审核，重点关注一张试卷中，是否出现重复知识点考核、前后试题彼此是否有内容上的关联等。

第四步，确立合格线

根据试卷的难度与考核点，设定合格线，合格线的设定要由考试测量学专家带领考试内容专家来共同完成。

2.     组卷的工作要求

合理的组卷策略将确保考试试题的有效利用，以及充分贯彻设定好的考试目标，以下是组卷时的工作要求：

a)   自动组卷时，如果题库中试题的数量不够多，建议减少组卷规则和组卷条件，否则很可能抽不出试题。

b)   完整试卷组成之后，需要认真审核试卷，包括试题间有没有暗含关系、知识点的分布是否合理等。试卷的审核可以参考以下原则：

Ø       试卷要求是否符合考试大纲承诺的要求？

Ø       试卷的内容分布是否合理？取样是否有代表性？

Ø       试卷题目的难易程度是否适中？有没有偏题怪题？

Ø       试卷是否过分倾向考知识的记忆？

Ø       试卷长短是否合理？

Ø       题意是否明确？文字是否精简？

c)   如果试卷质量不理想，需要替换调整更新相应题目，换掉质量较差的题目。

d)   如果希望一次组成两份试卷，即AB卷，一定要注意保证两份试卷之间的等值性，否则会影响测试的结果；

e)   组成试卷后，确立试卷的评分方法与合格分数也是必须要同步完成的。合格分数设定一定要由专家的测量学专家来协助完成。

第五部分  入库管理

一、            题库建设规范流程

题库是大量性能业已查明检验的合格试题的有序存贮，目的是为高效成批生成具指定性能的优良试卷服务。

题库对于考试发挥着以下三方面的作用：

1.    收集存档备查。通过建设题库来收集、整理试题，以便在今后的命题实践与研究工作中供人利用。档案资料作用，是题库的一项重要功能。

2.    专家命题辅助手段。题库存贮的大量试题，多数都是优质试题。一种方式可由专家直接选出组合进新的试卷中；或给专家以启发，参考着编拟出新试题。

3.    生成试卷的逻辑前提和实际基础。随着考试次数日益频繁，命题量也日益增大，最终需要采用机器自动生成试卷方式来组卷。有了题库中大量优良试题作保障，自动组卷将很方便的得以实现。

考试题库建立，应遵守以下几个步骤：

一、确定建库计划

确定建库计划须明确题库的考核目标，并与考试目标结合起来。具体对于某一科目的考试而言，要绘制体现各级测量目标和各部分内容间关系的考核内容细目表。

二、将命制好的题目导入题库

根据建库计划挑选符合要求的考试试题。试题可通过三种方式得到：一是请学科或领域的专家命题，二是由专业人员从已有考试中挑选题目，三是向社会征集题目。入库的题目应得到专家的最终评审。

三、试题的参数设定与贮存的规范设定

题库管理人员将符合质量要求的题目存放到题库中，以备使用。入库同时，需要对试题进行参数设定。试题参数有两类，一类是定性的，包括试题所考察的知识内容、所测量的目标、是重点还是非重点、试题的题型、互斥题、关联题等；定量性的参数包括难度、区分度、猜测度等统计指标，及试题满分、所需时间、试题曝光率等。试题参数设定后再进行分类，一般是按内容分类，依考试内容或测量目标设计成层次或平行结构，同一内容的试题还要按难度排序，并编上代码，也可按关键词编码。

四、等值化处理

题库中各项目的难度和区分度等指标都应在同一量尺上取值，这样各题才能按同一标准进行相互比较。但在试测时可能使用了不同的被试样本，所计算出的难度和区分度等指标就没有标定在同一量尺上。这需要通过等值化处理才能实现，当样本量很大时，等值问题可以不加考虑。

五、题库的维护和更新

题库管理人员要不断对题库进行动态维护和更新，从而确保其安全性和有效性。题目的修改需填制题目修改记录单。