职业农民培训绩效评估研究述评
李宝值, 米松华, 杨良山, 黄河啸, 朱奇彪*
浙江省农业科学院 农村发展研究所,浙江 杭州 310021
*通信作者,朱奇彪,E-mail: 1090506033@qq.com

作者简介:李宝值(1987—),男,黑龙江佳木斯人,博士,助理研究员,主要研究方向为农村人力资源开发。E-mail: lbzjms@126.com

摘要

从国内外文献综述视角,首先梳理了国外一般化职业培训绩效评估体系的研究起点、发展动力以及演进路径,并构建了一个兼容多种模型划分方式的总体分类框架,然后总结中国职业农民培训绩效及其影响因素研究,最后从理论和实证2个角度提出4项研究建议,为这一问题的深入探讨提供参考。

关键词: 培训绩效; 培训评估; 农民培训
中图分类号:F323.6 文献标志码:A 文章编号:1004-1524(2018)01-0167-09 doi: 10.3969/j.issn.1004-1524.2018.01.22
Review on evaluation of training performance of vocational farmer
LI Baozhi, MI Songhua, YANG Liangshan, HUANG Hexiao, ZHU Qibiao*
Institute of Rural Development, Zhejiang Academy of Agricultural Sciences, Hangzhou 310021, China
Abstract

The present study constructed a general classification framework and provided suggestions for future research from the perspective of literature review at home and abroad. Firstly, by combing the starting point, dynamics and evolutionary path in general training evaluation research, a general framework was constructed. Then, evaluation results and its influencing factors of Chinese vocational farmer training were summarized. Finally, suggestions derived from above analysis were proposed from both theory and practice.

Keyword: training performance; training evaluation; farmer training

培育新型农业经营主体是深入实施乡村振兴战略的重要举措, 而新型职业农民培训是加快构建新型职业农民队伍的关键所在。2016年中央财政投入15亿元用于培训100万名新型职业农民。在如此大规模投入之下, 政府迫切需要准确了解培训绩效, 既用于判断培训目标的完成程度, 也作为优化今后培训资源配置的决策依据。在理论上, 无论是在链式培训模型还是环式培训模型中, 培训绩效评估都是不可或缺的环节[1]。其主要作用在于:一是判断培训效果是否达到预期, 培训收益是否与投入相匹配, 以及培训所学能否应用于实践[2]; 二是设计并实施更有效的培训项目, 帮助组织者在后续培训课程的开发中做出更优决策[3]; 三是改善培训效果, 培训评估可以提高学员的学习意识, 使学员更加积极地接受培训[4]。基于此, 本文首先梳理了国外一般化职业培训绩效评估体系的研究起点、发展动力以及演进路径, 并构建了一个兼容多种模型划分方式的总体分类框架, 然后总结了我国职业农民培训绩效及其影响因素研究, 最后从理论和实证2个角度提出4项研究建议。

1 国外研究主要内容及评述

目前, 国外鲜有研究专门讨论职业农民培训绩效评估, 且多侧重于对一般化培训绩效评估体系的构建。这既有现实层面的原因, 例如国外职业培训多集中于非农部门, 也有理论层面的考虑, 比如职业培训绩效的基础分析框架具有一定通用性。下文根据相关文献演进的逻辑顺序分别介绍研究起点、发展动力及演进路径, 最后构建一个兼容多种划分方式的总体分类框架。

1.1 研究起点:K氏模型概述

早在1959年, Kirkpatrick[5]便提出了关于培训绩效评估体系构建的基本思想。尽管遭受过若干质疑, 但该模型仍然获得了广泛应用, 被认为是最流行的培训绩效评估模型之一[6]。因为该模型既满足了培训评估的系统性要求, 又提升了培训评估的实践意义[7]。同时, 该模型简化了复杂的培训评价过程, 简明扼要地抓住了培训绩效评估的核心内容[8]

该理论认为培训绩效可以从4个层级加以评估, 分别为反应(reaction)、学习(learning)、行为(behavior), 以及结果(results)。从含义上看:第一层级反应指学员对培训的主观评价, 通常表现为学员对培训的满意度; 第二层级学习指学员从培训中获取知识和技能的程度; 第三层级行为指学员因参加培训而出现的职业行为改变, 也被称为迁移(transfer), 是近年来十分流行的研究主题; 第四层级结果指培训对于学员所在组织效益的影响。从视角上看, Kirkpatrick本人强调了个体与组织的差别, 前2个层级属于个体层面, 后2个层级属于组织层面。后续研究拓展出另外2种视角:一是内外之分[9], 即将反应与学习视为内部类型, 因为它们关注在培训项目内发生了什么, 而将行为和结果视为外部类型, 因为它们刻画的是培训结束后的变化; 二是远近之分[10], 即将反应和学习归为短期类型, 而将行为和结果归为长期类型。

1.2 演进动力:K氏模型批判

K氏模型在取得广泛应用的同时, 也遭遇了若干质疑, 这些质疑成为后续研究发展的重要推力。

1.2.1 关于模型假定的质疑

K氏模型假定4个评估层级之间依次呈现单向线性作用关系。但越来越多的经验研究发现, 4个层级之间的关系或者不显著, 或者呈非线性[11]。进一步而言, 该假定也暗示着反应层级可以作为其他层级的代理测度, 这不仅会强化单独使用反应层级的滥用趋势, 而且还会弱化其他层级的存在意义, 从根本上威胁K氏模型4分法的必要性。更重要的是, 这种独宠反应层级的评估导向, 容易诱导培训供给方将精力局限于如何迎合学员的主观感受(特别是愉悦感), 而不是如何真正让学员学有所得、学以致用、用之有效, 从而导致培训出现娱乐功能超过教育功能的异化[12]。实际上, 许多真正的成长进步都不是一个轻松愉快的过程, 正所谓“ 良药苦口利于病” “ 梅花香自苦寒来” 。

1.2.2 对于模型理论性的质疑

越来越多的研究表明, 培训绩效受到各种因素的影响[13], 例如培训前期因素、学员个体因素, 以及贯穿培训前、中、后期的环境因素。但是K氏模型没有提及与解释培训绩效的影响因素及其作用机制, 也没有扎实的理论基础, 所以K氏模型也被认为只是一种分类体系(taxonomy)[11], 导致评估风险增加或评估结果失效。例如, 大量的经验研究批判了K氏模型对环境类影响因素的忽视[14]。这种忽视等同于默认环境因素对每个学员的迁移行为具有相同影响, 从而导致无法根据评估结果作出有效判断:即使获知行为层级的评估结果不佳, 也无法进一步判定究竟是因为培训本身存在问题, 还是因为环境因素限制了所学的应用, 进而误导培训管理者作出错误决策, 或弱化有效培训, 或强化无效培训。

1.3 演进路径:渐进式演化

在上述质疑的有力推动下, 后续研究并没有采用完全抛弃K氏模型的“ 激进” 式变革, 而是呈现出“ 继承+修正” 的“ 渐进” 式演化形态。主要有2条演进脉络:一条是“ 继承式” 演进, 表现为评估层级的增加和评估层级的细化; 另一条是“ 修正式” 演进, 既包括总结型(summative)模型与形成型(formative)模型的区分, 也包括结果性评估(evaluation)与有效性评估(effectiveness)的分化。

1.3.1 评估层级的增加

K氏模型虽然提到了企业层面的培训绩效, 但并未提供具体指标, 这也成为后续研究的一个发展方向。新增评估层级主要落脚于企业经济收益或社会价值, 例如以投资回报作为第五评估层级[15]。不过该模型受限于2个约束:一是其假定由学员所在单位开展培训, 因而并不适用于第三方培训; 二是净收益难以有效测度或从其他因素中分离出来。为此, 控制组方法和前沿分析方法得以应用。但是这些仅仅增加评估层级的研究进展依然属于分类体系, 是介于理论初始阶段和最终证实阶段的中间状态[16]

1.3.2 评估层级的细化

对于评估层级的细化集中于反应层级和学习层级。反应通常被细分为情感型反应和效用型反应[17], 前者指学员在培训中的享受程度, 后者指学员在多少程度上相信培训所学。学习层级通常被细分为3个维度:认知型, 技能型, 情感型[18]。其中, 认知型学习包括口头知识及其整理和组织, 技能型包括所学技能本身与展示所学技能的过程, 情感型包括情感和动机的变化。但是由于难以实践应用, 这种细分并未被实践者广泛采用[19]

1.3.3 总结型与形成型的区分

不同于K氏模型及其“ 继承式” 演进对培训结果的重视, 另一个重要演进方向是对整个培训过程的强调。这些研究将培训评估分为2种类型:总结型和形成型[20]。其中, 总结型评估主要回答培训是否有效这一问题, 侧重对培训效果的综合性评估, 从而判断培训是否达到初衷。该类研究可以划分为3个阶段[10]:第一阶段(1950s— 1980s), 是以K氏4层评估模型为代表的实践导向型研究; 第二阶段(1980s— 2000s), 是以投资回报(ROI)浪潮为代表的过程驱动型研究; 第三阶段(2000s— ), 属于理论导向的综合性研究, 涌现出更先进的统计分析方法、问卷和模型。与此对应, 形成型评估主要回答如何提高培训质量这一问题, 侧重对整个培训流程的评估, 并由此提出培训项目的改进方案。代表性研究包括CIRO模型[21]和CIPP模型[22], 其中:CIRO模型包括环境、输入、反应, 以及结果4个层级; CIPP模型包括环境、输入、过程, 以及产出4个层级。

1.3.4 结果性评估与有效性评估的分化

上述关于形成型和总结型的区分是对培训过程的强调, 而从更宏观的视角来看, 培训过程属于培训绩效影响因素的范畴, 所以一个更加彻底的修正方向是将培训绩效影响因素纳入培训绩效评估模型。由此, 后续研究强调了结果性评估和有效性评估的区分[19], 前者侧重评估培训结果, 而后者侧重分析这些结果形成的原因。

有效性评估的早期代表性研究来自NS模型[23]。该模型强调了个体特征中动机因素和环境好感度的作用, 旨在说明即使培训被较好地设计和实施, 但如果学员知道他们的同伴或领导对于培训持负面态度, 那么学员的学习和转移动机就会下降, 最终削弱培训绩效; 然而, 由于过于复杂, 该模型难以应用于实践[24]。不同于K氏模型和NS模型分别处于简洁和烦琐的两极, BF模型[25]兼具过程化特征与结构化特征。该模型将培训迁移过程概括为3大部分:培训输入, 培训结果, 迁移状态。培训输入包括了由能力、人格、动机构成的学员特征, 由学习规则、培训顺序、培训内容构成的培训设计, 以及由外部支持和使用机会构成的工作环境。培训结果包括在培训过程中的学习成果及其在培训结束时的保留情况。迁移状态指培训所学在实践工作中的一般化应用及其持续情况。

更加彻底地完善来自Holton模型[11]。为克服K氏模型在因果性和完整性上的局限, 该模型将培训绩效重新划分为3个层级— — 学习结果、个体绩效、组织绩效, 并分别从能力、动机、环境氛围3个角度构建了培训绩效影响因素体系。其中, 动机类因素包括学习动机、迁移动机、预期效用, 能力类因素包括个人能力、迁移设计、组织目标联系度, 而环境类因素包括反应、迁移氛围、外部事件。在Holton模型提出之初, 缺乏相应的分析工具来测度模型中的构念, 所以该模型的实证检验直到后来才逐渐得以实施。基于对该模型提出后近10 a的实证研究的总结, 修正后的Holton模型得以形成[26]。修正的内容主要围绕动机展开:一是吸收了人格特征因素影响学习动机的最新进展, 包括五型人格理论、目标设置理论、心理控制源理论; 二是用“ 通过学习改进工作的动机” (MTIWL)取代了学习动机和迁移动机。在模型内容调整之外, 修正的另一个重点是推动研究的实证化, 主要是通过总结相关文献, 构建了新型量表与构念体系。

1.4 总体框架:模型分类框架

随着培训绩效评估模型的日益增多, 如何梳理各个模型之间的逻辑关系, 并在更宏观层面上构建一个系统性分类框架变得十分必要。目前, 主要有3种划分方式:第一种是形成型和总结型的区分; 第二种是结果性和有效性的区分; 第三种是过程模型(process)、层级模型(hierarchical), 以及中介模型(mediational)的区分[24]。过程模型更加关注培训过程及其对培训绩效的影响, 强调培训设计者与投资者在评估中的角色, 描述了培训决策的重要因素; 层级模型强调培训绩效的种类划分, 通常将培训结果进行结构化和层级化的区分; 中介模型则侧重个体特征与组织目标的因果。

综合对比上述3种主流的模型分类方式不难发现, 它们之间既有重合又有区别, 但鲜有研究梳理它们之间的逻辑关系, 本文用图1加以表示。纵向坐标轴的右侧和左侧分别代表培训结果与影响因素, 左侧横向坐标轴的上下两侧分别代表培训过程与其他因素。在此框架下, 不同象限的组合构成了不同的培训绩效评估模型划分方式。第一象限和第四象限的组合代表总结型模型、结果型模型、层级型模型, 例如K氏模型、ROI模型、ROE模型; 第一象限和二象限的组合代表过程型模型和形成型模型, 例如CIRO模型、CAPIO模型、CIPP模型; 4个象限的总体组合代表有效性模型和中介模型, 例如NS模型、BF模型、Holton模型。

图1 职业培训绩效评估模型的总体框架Fig.1 Framework of vocational training performance evaluation model

总之, 尽管学界提出了多种模型, 但是K氏模型仍然最为流行。究竟使用哪种模型, 没有固定的评判标准, 需要结合研究目的与模型特点来进行选择, 同时也要考虑培训组织或评估组织的成熟度与环境制约[27]

2 国内研究主要内容及评述
2.1 研究内容

与国外研究从分类体系到因果模型的演进趋势一致, 关于职业农民培训绩效评估的国内研究可以概括为2方面:首先是培训绩效的直接评估, 具体可分为2类, 一种是基于实践归纳的单级指标设置, 另一种是基于层次分析法(AHP)等统计方法的多层级指标体系构建; 其次是培训绩效的影响因素分析, 主要有2种思路, 一种是通过定性分析和描述性统计分析, 探索农民培训绩效增长的制约因素并提出对策建议, 另一种是通过问卷调查和计量模型估计影响因素的作用效果, 并通过完善计量方法来提高参数估计的准确度和可信度。

2.1.1 单级指标设置研究

主要包括2种类型。一种以培训机构为主体, 关注培训项目的实践工作。如:李玉高等[28]认为培训绩效的评估内容应包括培训内容、培训方式、接受培训农民情况、环境及其他因素; 黄耀如[29]认为应包括组织评价、农民评价、专家评价、台账评价, 以及财务评价; 齐乃敏等[30]提出了资金使用情况、项目管理情况, 以及绩效目标情况; 姜明伦等[31]设置了4个指标— — 绿色证书培训人次、实用技术培训人次、学历教育培训人数、职业技能培训人数。另一种以农民为主体, 关注农民参与培训后的变化情况。如张景林等[32]较早地提出了收入增长、农户应用技术能力、组织化程度。后续研究在此基础上进行了拓展:一方面是主观指标的拓展[33, 34], 如受训内容、施训主体、培训师资、参训时间、训后效益、培训方式、掌握应用技术等方面的主观满意度; 另一方面是客观指标的拓展[35, 36, 37], 例如新技术采用项数、农作物产量增加、生态效益、收入增长效果等。

2.1.2 指标体系构建研究

主要包括2种类型。一种是基于培训绩效内容差异的横向拓展。如:高翠玲等[38]将培训绩效划分为3个维度— — 人才效益、经济效益和社会效益, 并由此构建了包含11个指标的指标体系, 采用参与式农村评估(PRA)与权值因子判断表来确定指标权重; 刘蕾[39]设置了培训项目建设和培训项目结果2个一级指标, 下设7个二级指标, 采用矩阵对偶比较法对指标赋予权重; 宋玉兰等[40]构建了包含6个准则层指标和17个要素层指标的指标体系, 并用模糊层次综合评价法(AHP-FCE)确定权重。另一种是基于培训过程时间维度的纵向延伸。例如:高翠玲[41]按照培训流程顺序设置了3个二级指标— — 需求评估、过程评估和效果评估, 下设4个三级指标和31个四级指标; 张伶等[42]按照“ 学以致用” 的顺序设置了4个二级指标— — 反应成果、认知成果、迁移成果及维持成果; 周静[43]基于“ 培训即时效果— 培训后期效果” 的顺序, 建立了包括3个一级指标(培训满意度、私人收益、社会收益)和18个二级指标的指标体系。

2.1.3 绩效制约因素研究

主要分为2类。第一类是农民自身因素, 主要包括农民相对分散而难以组织化集中培训[44], 农民的文化程度与科技素质偏低、思想认识不到位[45], 农民无力投资职业培训[46], 农民关于培训效益的短视化[47]。第二类是培训供给因素。一是政府因素。如相关法制保障还需加强[48], 监管机制有待完善[49], 政府将培训者数量等同于效益[47], 多部门培训统筹协调不够[50], 缺乏总体部署、资源利用不合理[43], 培训经费投入不足[51], 农民培训补助标准过低[45], 政府和相关职能部门宣传不到位[52]。二是培训机构管理因素。如培训机构将培训通过率等同于效益[47], 注重数量和规模而忽视质量和特色[46], 部分经济实力薄弱的机构运转困难[53], 培训机构师资力量薄弱[54], 基层农业技术人员严重不足且年龄老化严重[55], 培训与劳动力市场对接不足[56], 培训后续服务不足[57]。三是培训内容与方式因素。如培训内容难以满足农民需求[49], 缺乏针对性和应用性[44], 培训内容的直观性、实用性和时效性较差[46], 农民所需的新型培训项目匮乏[53], 培训方式单一死板[43], 时间安排不合理[45], 农忙时节开展培训导致农民没有时间参加[58]

2.1.4 绩效影响因素的计量分析

代表性研究来自徐金海团队。他们将农民培训绩效分解为经营能力提升、新技术采用项数、农业收入提高、组织化程度, 并通过计量模型研究培训机构服务供给对培训绩效的影响。如徐金海等[58]基于江苏省540份样本的问卷调查, 借助多元回归和结构方程模型表明, 对经营能力提升有显著正向影响的是培训方式, 对采用新技术项数有显著正向影响的是培训内容, 对产量增加幅度有显著正向影响的是培训时间和培训内容, 对收入提高有显著正向影响的是培训时间。在同一分析框架下, 徐金海等[35]利用167份江苏省调查问卷和Logit回归模型, 发现对经营能力提升具有显著正向影响的是培训内容, 对新技术采用项数具有显著正向影响的是培训方式, 对农业收入提高具有显著正向影响的是培训方式、培训内容, 对总绩效具有显著正向影响的是培训内容。作为近期研究的代表, 姜明伦等[31]将培训绩效操作化为绿色证书培训人数、实用技术培训人次、学历教育培训人次、职业技能培训人次, 基于宁波市107份调查问卷, 采取Box-Cox变换方法发现, 对平均合格率具有显著正向影响的是使用多媒体投影仪和开展田间示范, 而外聘教师具有显著负向影响。

2.2 总体评述

国内相关研究已取得丰富成果, 但仍可从以下几个方面加以发展。一是新型职业农民培训绩效研究的理论框架有待完善。关于农民培训绩效的内涵尚未达成共识, 已被广泛应用于其他行业的培训绩效评估模型尚未在新型职业农民培训研究中得到广泛应用, 尚未构建出获得广泛共识的符合我国实际情况的理论分析框架。二是相关实证研究鲜有说明测评时点与培训时点的时间距离, 降低了研究结论的可比性, 且无法全面分析绩效的动态变化过程及其影响因素。有些研究甚至颠倒了培训实施与绩效测评的时间顺序, 导致因果关系的解释失效。三是已有研究往往缺少差异化视角, 对于农民类型、培训需求类型、培训供给类型、培训绩效类型的区分与对比有待加强。四是相关研究较少关注体现“ 学以致用” 的培训迁移和“ 用之有效” 的经济效应, 而这些绩效在20世纪90年代后已成为国外研究热点。如何对接这些理论进展与中国新型职业农民实际特征, 成为完善理论构建和补充经验证据的重要切入点。五是用于影响因素分析的计量方法较为单一, 且应用不够规范, 往往出现重要解释变量遗漏, 或未对分类变量进行虚拟化处理等问题。

3 对策及建议

总体而言, 职业农民培训绩效评估研究已取得大量成果, 基于一以贯之的研究演进脉络, 今后研究在以下几个方面的发展值得期待。

第一, 基于培训范式转变的职业农民培训绩效评估体系发展。职业农民培训绩效评估体系的发展根植于培训范式的转变。作为培训八大范式[59]的最新进展, 学习与绩效(L& P)范式和社会化学习能力(SLC)范式均强调, 随着学习型组织的建立与媒介科技(如互联网)的发展, 人们可以跨越时空障碍, 从各式各样的人身上学习。农民培训领域不断涌现的新型培训模式与不断扩大的培训绩效内涵对传统培训绩效评估模型提出了新的挑战。如何评判新兴的培训过程, 如何评估更广义的学习行为和学习绩效, 如何解释新型培训绩效的差异, 对于这些问题的回答将成为推动职业农民培训绩效评估体系发展的关键所在。

第二, 基于中国情景的职业农民培训绩效评估理论构建。国际主流职业培训绩效评估模型多是基于欧美发达国家情景, 而较少考虑以中国为代表的发展中国家。两者不仅在宏观层面的历史文化、制度背景、管理体制方面存在明显区别, 而且在微观层面的培训过程和结果上也具有重大差异。例如国外职业培训往往是学员所在企业提供资助或进行组织, 且多集中于非农私有部门。此外, 在培训绩效类型方面, 已有理论往往忽略了收入的异质性, 而中国在城镇化加速发展和农民兼业化普遍存在的背景下, 农民收入存在明显的结构差异。

第三, 基于支撑条件日益成熟的职业农民培训绩效评估重心迁移。美国培训与发展协会对于K氏模型中不同层级的使用频率进行了调查, 发现各层级实施频率随着层级增长而下降[60]。但同时, 无论是培训机构还是评估机构都对行为层级和结果层级的应用价值十分重视[61]。这说明行为和结果层级实施频率低下不是因为没有价值, 而是由于受到了某些因素的制约。随着这些制约因素逐渐得以消解, 培训绩效评估的重心将进一步从培训感受与考试成绩发展至“ 培训迁移” 与“ 培训效应” 。这种研究重心的迁移对于新型职业农民而言具有重要现实意义。培训迁移范畴内的技能提高关乎现代农业的可持续发展, 培训效应中的收入增长涉及小康社会的全面建成。

第四, 基于实证工具创新应用的职业农民绩效评估模型检验。理论构建和实证检验是研究发展的双轮驱动, 而在职业农民培训绩效评估研究乃至一般化的培训绩效评估研究中, 实证研究的发展相对滞后于理论构建。一是需要收集更广泛的数据, 既包括横向上样本数量的扩充, 也包括纵向上动态数据的记录。二是需要开发更具信度的问卷量表。在各个培训绩效类型中, 只有培训迁移的问卷量表较为完善, 例如在行为迁移层级中从迁移环境发展而来的学习迁移系统清单(LTSI)。如何进一步提高问卷的效度与信度仍需深入研究[62]。三是需要应用更先进的统计方法。因为农民参与培训并不是一个随机行为, 某些不可观测特征(如动机和能力)既影响培训机会获得和实际参与, 又影响收入水平, 所以获取真实培训效应的关键就在于处理这种培训参与的自选择性。单纯基于最小二乘法所得的估计结果往往是被高估的, 因此, Heckman两步法、工具变量法, 以及固定效应模型等高级计量方法亟须应用。此外, 考虑到影响培训绩效的因素众多且多有主观指标, 结构方程模型的应用值得进一步推广。当然, 多种高级方法的混合使用也是一种发展趋势[63]

The authors have declared that no competing interests exist.

参考文献
[1] THORNE K, MACKEY D. Everything you ever needed to know about training[M]. London: Kogan Page Publishers, 2003. [本文引用:1]
[2] BLUME B D, FORD J K, BALDWIN T T, et al. Transfer of training: a meta-analytic review[J]. Journal of Management, 2010, 36(4): 1065-1105. [本文引用:1]
[3] KIRKPATRICK D L. Training and performance appraisal-are they related[J]. Training and Development, 2006 (9): 44-45. [本文引用:1]
[4] SAEDON H, SALLEH S, BALAKRISHNAN A, et al. The role of feedback in improving the effectiveness of workplace based assessments: a systematic review[J]. BMC Medical Education, 2012, 12(1): 25. [本文引用:1]
[5] KIRKPATRICK D L. Techniques for evaluation training programs[J]. Journal of the American Society of Training Directors, 1959, 13: 21-26. [本文引用:1]
[6] BLAU G, GIBSON G, BENTLEY M A, et al. Testing the impact of job-related variables on a utility judgment training criterion beyond background and affective reaction variables[J]. International Journal of Training and Development, 2012, 16(1): 54-66. [本文引用:1]
[7] WANG G. Valuing learning: the measurement journey[J]. Educational Technology, 2003, 43(1): 32-37. [本文引用:1]
[8] BATES T. Charting the evolution of lifelong learning and distance higher education: the role of research[EB/OL]. (2008-07-31) [2017-06-05]. http://www.tonybates.ca/wp-content/uploads/2008/07/research.pdf. [本文引用:1]
[9] PRASLOVA L. Adaptation of kirkpatrick’s four level model of training criteria to assessment of learning outcomes and program evaluation in higher education[J]. Journal of Personnel Evaluation in Education, 2010, 22(3): 215-225. [本文引用:1]
[10] WANG G G, WILCOX D. Training evaluation: knowing more than is practiced[J]. Advances in Developing Human Resources, 2006, 8(4): 528-539. [本文引用:2]
[11] HOLTON E F. The flawed four-level evaluation model[J]. Human Resource Development Quarterly, 1996, 7(1): 5-21. [本文引用:3]
[12] MICHALSKI G V, COUSINS J B. Differences in stakeholder perceptions about training evaluation: a concept mapping/pattern matching investigation[J]. Evaluation and Program Planning, 2000, 23(2): 211-230. [本文引用:1]
[13] SALAS E, CANNONBOWERS J A. The science of training: a decade of progress[J]. Annual Review of Psychology, 2003, 52(1): 471-499. [本文引用:1]
[14] GOLDSTEIN I L. Training in organizations: needs assessment, development, and evaluation[M]. Belmont, CA: Wadsworth, 2002. [本文引用:1]
[15] PHILLIPS J J. How much is the training worth?[J]. Training & Development, 1996, 50(4): 20-25. [本文引用:1]
[16] BOBKO P, RUSSELL C. A review of the role of taxonomies in human resources management[J]. Human Resource Management Review, 1991, 1(4): 293-316. [本文引用:1]
[17] TRACEY J B, HINKIN T R, TANNENBAUM S I, et al. The influence of individual characteristics and the work environment on varying levels of training outcomes[J]. Human Resource Development Quarterly, 2001, 12(1): 5-23. [本文引用:1]
[18] KRAIGER K, FORD J K, SALAS E. Application of cognitive, skill-based, and affective theories of learning outcomes to new methods of training evaluation[J]. Journal of Applied Psychology, 1993, 78(2): 311-328. [本文引用:1]
[19] ALVAREZ K, SALAS E, GAROFANO C M. An integrated model of training evaluation and effectiveness[J]. Human Resource Development Review, 2004, 3(4): 385-416. [本文引用:2]
[20] SCRIVEN M. Types of evaluation and types of evaluator[J]. American Journal of Evaluation, 1996, 17(2): 151-161. [本文引用:1]
[21] WARR P, BIRD M, RACKHAM N. Evaluation of management training: a practical framework, with cases, for evaluating training needs and results[M]. London: Gower Press, 1971. [本文引用:1]
[22] GALVIN J C. What can trainers learn from educators about evaluating management training?[J]. Training and Development Journal, 1983, 37(8): 52. [本文引用:1]
[23] NOE R A, SCHMITT N. The influence of trainee attitudes on training effectiveness: test of a model[J]. Personnel Psychology, 1986, 39(3): 497-523. [本文引用:1]
[24] LANDERS R N, CALLAN R C. Training evaluation in virtual worlds: development of a model[J]. Journal for Virtual Worlds Research, 2012, 5(3): 1-20. [本文引用:2]
[25] BALDWIN T T, FORD J K. Transfer of training: a review and directions for future research[J]. Personnel Psychology, 1988, 41(1): 63-105. [本文引用:1]
[26] HOLTON E F. Holton’s evaluation model: new evidence and construct elaborations[J]. Advances in Developing Human Resources, 2005, 7(1): 37-54. [本文引用:1]
[27] GOLUGURI R R. Examination of models of evaluation revalidation of evaluation models[J]. Advances in Economics and Business Management, 2015, 11(2): 1086-1090. [本文引用:1]
[28] 李玉高, 邵长芹. 关于农业生产技术培训效果评估的探究[J]. 中国农业教育, 2006 (4): 56-57.
LI Y G, SHAO C Q. A study on the effect evaluation of technical training in agricultural production[J]. China Agricultural Education, 2006 (4): 56-57. (in Chinese) [本文引用:1]
[29] 黄耀如. 农民培训工程绩效评价体系建设初探[J]. 江苏农村经济, 2013 (3): 52.
HUANG Y R. Preliminary study on construction of performance evaluation system for farmer training project[J]. Jiangsu Rural Economy, 2013 (3): 52. (in Chinese) [本文引用:1]
[30] 齐乃敏, 秦聪. 江苏农民培训项目绩效管理探索[J]. 农民科技培训, 2014(7): 16-17.
QI N M, QIN C. Study on performance management of farmer training project in Jiangsu[J]. Nongmin Keji Peixun, 2014(7): 16-17. (in Chinese) [本文引用:1]
[31] 姜明伦, 于敏, 李红. 农民培训机构的培训效果及影响因素研究: 以宁波市为例[J]. 农业展望, 2015 (8): 55-62.
JIANG M L, YU M, LI H. Training effects and influencing factors of farmers training institutions: taking Ningbo City as an example[J]. Agricultural Outlook, 2015 (8): 55-62. (in Chinese with English abstract) [本文引用:2]
[32] 张景林, 刘永功. 农民培训效果及其影响因素研究[J]. 中国农业教育, 2005 (4): 1-4.
ZHANG J L, LIU Y G. Study on farmer’s training efficiency and relevant affecting factors[J]. China Agricultural Education, 2005 (4): 1-4. (in Chinese with English abstract) [本文引用:1]
[33] 徐金海, 蒋乃华. “新型农民培训工程”实施绩效分析: 基于扬州市的调查[J]. 农业经济问题, 2009 (2): 54-59.
XU J H, JIANG N H. Implementation performance analysis on the “New-type Farmer Training Project”: based on an investigation in Yangzhou, Jiangsu Provice[J]. Issues in Agricultural Economy, 2009 (2): 54-59. (in Chinese) [本文引用:1]
[34] 吴小颖. 新农村建设中农民培训效果分析: 以福建省茶农为例[J]. 福建农林大学学报(哲学社会科学版), 2011, 14(4): 14-17.
WU X Y. Analysis of the effectiveness of farmers’ training program in building a new countryside: a case study of tea farmers in Fujian Province[J]. Journal of Fujian Agriculture and Forestry University ( Philosophy and Social Sciences), 2011, 14(4): 14-17. (in Chinese with English abstract) [本文引用:1]
[35] 徐金海, 蒋乃华, 胡其琛. 新型农民培训工程实施绩效评估研究: 基于江苏省的实证[J]. 农业经济问题, 2014 (10): 46-54.
XU J H, JIANG N H, HU Q C. Study on the performance evaluation of new farmers’ training project: evidence from Jiangsu Province[J]. Issues in Agricultural Economy, 2014 (10): 46-54. (in Chinese) [本文引用:2]
[36] 甘俊祎, 颜丙昕, 蔡新波. 农户需求因素对农民培训绩效影响的调查分析: 以江苏省邳州市农民培训工程调查为例[J]. 农民科技培训, 2011 (2): 6-10.
GAN J W, YAN B X, CAI X B. Investigation and analysis of the influence of farmers’ demand factors on farmers’ training performance: a case study of farmers’ training project in Pizhou City of Jiangsu Province[J]. Nongmin Keji Peixun, 2011 (2): 6-10. (in Chinese) [本文引用:1]
[37] 朱奇彪, 米松华, 黄莉莉, . 新型职业农民培训的绩效评估与分析: 基于浙江省农村中高级“两创”人才培训的调查[J]. 江苏农业科学, 2014, 42(2): 407-411.
ZHU Q B, MI S H, HUANG L L, et al. Performance evaluation and analysis of new vocational peasant training: based on the survey of rural middle and senior “two innovation” talents training in Zhejiang[J]. Jiangsu Agricultural Sciences, 2014, 42(2): 407-411. (in Chinese) [本文引用:1]
[38] 高翠玲, 郭松朋, 张琳. 中国农民培训效果评估研究: 基于广西平南县家庭规模瘦肉型猪培训的实证研究[J]. 全国商情(经济理论研究), 2011 (24): 58-60.
GAO C L, GUO S P, ZHANG L. Evaluation of training effect of Chinese farmers: an empirical study based on the training of lean hogs in family scale in Pingnan County, Guangxi[J]. China Business( Jingji Lilun Yanjiu) 2011 (24): 58-60. (in Chinese) [本文引用:1]
[39] 刘蕾. 新农村建设背景下湖北省新型农民科技培训工程绩效研究[D]. 武汉: 华中农业大学, 2010.
LIU L. Performance evaluation of new farmers’ science and technology training project in Hubei Province under the background of new rural construction[D]. Wuhan: Huazhong Agricultural University, 2010. (in Chinese) [本文引用:1]
[40] 宋玉兰, 綦群高, 蒋志清, . 新疆少数民族农民培训绩效及改进策略: 基于南疆地区1045份的农户问卷调查[J]. 湖南农业大学学报(社会科学版), 2012, 13(4): 35-40, 54.
SONG Y L, QI Q G, JIANG Z Q, et al. Performance and improvement strategy of minority farmers training of Xinjiang: based on surveys of 1045 farmer households in south Xinjiang[J]. Journal of Hunan Agricultural University( Social Science), 2012, 13(4): 35-40, 54. (in Chinese with English abstract) [本文引用:1]
[41] 高翠玲. 新形势下农民培训评估指标体系的架构[J]. 安徽农业科学, 2010, 38(28): 16046-16048.
GAO C L. Framework of evaluation index system for farmers’ training under the new situation[J]. Journal of Anhui Agricultural Sciences, 2010, 38(28): 16046-16048. (in Chinese with English abstract) [本文引用:1]
[42] 张伶, 何建华. 培训系统与农民工职业培训绩效关系的实证研究[J]. 经济管理, 2011(11): 76-83. (in Chinese)
ZHANG L, HE J H. An empirical study on the effectiveness of training system to rural migrant workers’ occupational training performance[J]. Economic Management, 2011 (11): 76-83. (in Chinese with English abstract) [本文引用:1]
[43] 周静. 河南省新型农民培训存在的问题及建议[J]. 河南农业科学, 2013, 42(8): 205-208.
ZHOU J. Problems and suggestions of new farmers training in Henan Province[J]. Journal of Henan Agricultural Sciences, 2013, 42(8): 205-208. (in Chinese with English abstract) [本文引用:3]
[44] 杨传祥. 农民培训的问题及对策[J]. 山东省农业管理干部学院学报, 2004, 20(4): 18-19.
YANG C X. Problems and collusions of peasant training[J]. Journal of Shand ong Agricultural Administrators’ College, 2004, 20(4): 18-19. (in Chinese) [本文引用:2]
[45] 马惠玲. 浅议农民培训面临的问题及对策[J]. 农业科技与信息, 2010(4): 8-10.
MA H L. A brief discussion on the problems and countermeasures faced by farmers’ training[J]. Information of Agricultural Science and Technology, 2010 (4): 8-10. (in Chinese) [本文引用:3]
[46] 阚长侠, 薛庆林, 刘桂林, . 我国政府主导型农民培训存在的问题及解决对策[J]. 农业科技管理, 2009, 28(4): 56-59.
KAN C X, XUE Q L, LIU G L, et al. Problems existed in government-oriented farmer training in our country and countermeasures[J]. Management of Agriculture Science and Technology, 2009, 28(4): 56-59. (in Chinese with English abstract) [本文引用:3]
[47] 刘红燕. 失地农民培训评价体系的思考[J]. 湖南工业职业技术学院学报, 2009, 9(4): 39-40.
LIU H Y. Study on the effectiveness of training for career change to peasants lost land : based on the perspective of institutionalized[J]. Journal of Hunan Industry Polytechnic, 2009, 9(4): 39-40. (in Chinese with English abstract) [本文引用:3]
[48] 张桃林. 在农业部财务工作会议暨部属单位领导干部财务管理能力建设培训班上的讲话[J]. 中国农业会计, 2011 (5): 4-9.
ZHANG T L. Speech at the financial work conference of the Ministry of Agriculture and the training course of financial management ability for leading cadres of subordinate units[J]. Chinese Agricultural Accounting, 2011 (5): 4-9. (in Chinese) [本文引用:1]
[49] 李侠, 鲍亚宁. 新农村建设中新型农民培训的思考[J]. 河北农业科学, 2008, 12(11): 162-163.
LI X, BAO Y N. Thinkings on training new peasants in the construction of socialist new countryside[J]. Journal of Hebei Agricultural Sciences, 2008, 12(11): 162-163. (in Chinese with English abstract) [本文引用:2]
[50] 张菊霞, 夏金星. 湖南省新型农民培训的问题与对策研究[J]. 职教论坛, 2007 (11): 34-36.
ZHANG J X, XIA J X. Study on the problems and countermeasures of new farmers’ training in Hunan Province[J]. Vocational & Technical Education Forum, 2007 (11): 34-36. (in Chinese) [本文引用:1]
[51] 朱雪晶, 余艳锋, 李宁. 江西省新型农民培训中存在的问题及消解[J]. 新疆农垦经济, 2014 (3): 7-10.
ZHU X J, YU Y F, LI N. Problems and solutions in the training of new farmers in Jiangxi[J]. Xinjiang State Farms Economy, 2014 (3): 7-10. (in Chinese) [本文引用:1]
[52] 田旭. 新形势下新型农民培训问题研究[J]. 农机使用与维修, 2014 (6): 90.
TIAN X. Study on the training of new farmers under the new situation[J]. Farm Machinery Using & Maintenance, 2014 (6): 90. (in Chinese) [本文引用:1]
[53] 胡德华. 新型职业农民培训工作存在的问题及其创新对策: 以浙江省为例[J]. 成人教育, 2012(11): 85-88.
HU D H. The problems and innovative countermeasures on the training of new vocational farmers: based on the example of Zhejiang Province[J]. Adult Education, 2012(11): 85-88. (in Chinese with English abstract) [本文引用:2]
[54] 王雪梅. 浅析农民培训工作中存在的问题及发展建议[J]. 甘肃农业, 2014 (22): 91-92.
WANG X M. A brief analysis of the problems existed in the training of farmers and suggestions for their development[J]. Gansu Nongye, 2014 (22): 91-92. (in Chinese) [本文引用:1]
[55] 周雷. 新型农民培训存在的问题及对策[J]. 现代农业科技, 2013 (8): 327.
ZHOU L. Problems and countermeasures of new farmer training[J]. Xiand ai Nongye Keji, 2013 (8): 327. (in Chinese) [本文引用:1]
[56] 刘晔, 郭继强. 农民培训工程中的财政补贴分析[J]. 技术经济与管理研究, 2005 (4): 38-39.
LIU Y, GUO J Q. An analysis of financial subsidy in farmer training project[J]. Technoeconomics & Management Research, 2005 (4): 38-39. (in Chinese) [本文引用:1]
[57] 周会慧. 浙江省农民培训问题与发展对策研究[D]. 临安: 浙江农林大学, 2012.
ZHOU H H. Study on the problems and development strategies of farmer’s training in Zhejiang Province[D]. Lin’an: Zhejiang A&F University, 2012. (in Chinese with English abstract) [本文引用:1]
[58] 徐金海, 蒋乃华, 秦伟伟. 农民农业科技培训服务需求意愿及绩效的实证研究: 以江苏省为例[J]. 农业经济问题, 2011 (12): 66-72.
XU J H, JIANG N H, QIN W W. Empirical study on farmers’ demand , willingness for agricultural science and technology training services and its performance: a case of Jiangsu Province[J]. Issues in Agricultural Economy, 2011 (12): 66-72. (in Chinese) [本文引用:2]
[59] 威廉. 培训领域经历的八大范式[J]. 培训, 2012 (2): 81-85.
WILLIAM. Eight paradigms in the field of training[J]. Training, 2012 (2): 81-85. (in Chinese) [本文引用:1]
[60] WENTWORTH D, TOMPSON H, VICKERS M, et al. The value of evaluation: making training evaluations more effective[EB/OL]. (2009-12-31) [2017-06-05]. http://www.astdalaska.org/outside_files/Evaluation_Value.pdf. [本文引用:1]
[61] KENNEDY P E, CHYUNG S Y, WINIECKI D J, et al. Training professionals’ usage and understand ing of Kirkpatrick’s Level 3 and Level 4 evaluations[J]. International Journal of Training and Development, 2014, 18(1): 1-21. [本文引用:1]
[62] BATES R, HOLTON III E F, HATALA J P. A revised learning transfer system inventory: factorial replication and validation[J]. Human Resource Development International, 2012, 15(5): 549-569. [本文引用:1]
[63] WILLIAMS R C, NAFUKHO F M. Technical training evaluation revisited: an exploratory, mixed-methods study[J]. Performance Improvement Quarterly, 2015, 28(1): 69-93. [本文引用:1]