登陆注册
4855900000029

第29章 评鉴中心的准确性(2)

毋庸置疑,某些评鉴中心确实存在一些问题。测评结果只是人们制定晋升决策的部分依据(实际上,这正是我们希望的)。但是,在衡量评鉴中心的质量水平时,就算上面提到的把测评结果用错地方的情况不存在,预测效度是不是就没问题呢?Thornton和Byham1982年的研究给出了肯定的答案。

1987年,Gaugler等人也设计了各种方案(如,研究无结果反馈的情况下评鉴中心效度如何,同步验证以及研究测评结果如何应用于决策等)。结果表明,预测效度的平均水平都差不多(见表9.3)。

他们的研究还指出,预测效度的高低并不受测评效标类型的影响。测评结果不仅能够预测晋升或加薪等前景,还能预测岗位工作业绩和培训效果等效标。当然,并不是所有效标都会受到严重影响。

Gaugler等人(1987)对前人的研究进行了总结和评价,并提出了质量指数的概念。这里的质量指数和准确程度正向相关,换句话说,质量指数越高,预测效度就越高。

接下来要讨论的几个例子并不存在现实的效标污染。AT&T的评鉴中心是这一领域的一个里程碑。企业中的任何个人(包括测评对象本人)都对评分过程一无所知,测评结果则存放在公司以外的地方。另一个是晋升案例,目的是挑选出中层管理岗位的候选人。在评鉴中心结束较长一段时间后(这时,基层管理人员的业绩表现已经显露得比较充分了),真正的晋升决策才诞生。这种情况下,我们完全可以认为晋升的依据不是测评结果而是业绩表现。

另外,根据Tziner,Ronen和Hacohen(1990)的研究结果,评鉴中心可以对某些效标(如上级对测评对象业绩的评价,测评对象未来的发展情况等)进行预测。这种预测的准确性绝对可靠。Gluski和Sherman(1989)也得出了类似的结论。

总而言之,虽然预测准确程度可能被人为地提高了,但是还有一些研究证明,并不是所有效标都会受到测评结果的影响。况且,有的研究认为测评结果不容易在企业里传播开来,因此“现实的效标污染”似乎还不足以解释评鉴中心的有效性。

潜在的效标污染

这种观点认为评鉴中心的效标本身(业绩评估和晋升情况)可能和工作效果发生了混淆。有人认为警署的官员们看上去就是做警官的料,比如说“他们的个头都比较高”

(Guion,1987)。这种印象甚至影响到了某警署评鉴中心的评分,也影响到了警察们的业绩评估。于是,就有人说,正是由于都受到这种偏见的影响,评鉴中心的评分和实际效标才会趋于一致。这种说法的破绽有三:

首先,评鉴中心的效标多种多样,绝不仅仅是上级的业绩评估和晋升意向。表9.4表明,综合考虑不同的效标,评鉴中心的预测准确性完全可以得到验证(Gaugleretal.,1987)。这里的效标包括独立第三方观察员的评价(Bray&Campbell,1968)、下属的评价(McEvoy&Beatty,1989;Schmittetal.,1990)、所辖部门员工流动率(K.C.Ague,1971)、600位中高层管理人员在目标管理体系中的业绩(Britz,1989)以及若干电话销售代理商的销售业绩(Squires,1988)等。

所有效标不可能都受到某种所谓的“好员工”印象的影响。研究评鉴中心的人饱受效标问题的折磨(产业与组织心理学家也有这种经历)(Smith,1976),并且找到了目前为止可能是最好的衡量工作业绩的方法。

因此,我们可以说,评鉴中心在这方面的研究水平不低于产业心理学和人力资源管理的其他任何领域。

总之,对于个别测评指标而言,效度系数可能的确被高估了。但是,另外一些测评指标则不存在这种情况。

其次,每一个评鉴中心都有多名测评师参加。这些人包括企业中的高级管理人员,人力资源工作者、产业和组织心理学家、临床和咨询心理学家、管理咨询顾问以及来自其他企业的管理人员。目前还没有研究能够表明上述所有测评师的测评结果是否具有同样的预测效度。但我们还是找到了部分意义上的研究成果。说这是部分意义上的,因为它只对部分测评师做了比较。Gaugler等人(1987)研究了心理学家和管理人员这两类测评师,结论是,在心理学家和管理人员共同担任测评师的情况下,预测效度最高。

第三,就算个别管理者对“什么样的人会成为优秀管理者”有某种刻板印象,没有评鉴中心的帮助,他还是很难准确地预测其他人未来的业绩水平。另外,就算测评对象的直接上级能够预见到下属未来的业绩,他们也不能就更高级的管理岗位做出预测(Bernardin&Beatty,1984;McEvoy&Beatty,1988;Murphy&Cleveland,1991)。因此,企业往往还是要转向评鉴中心。

自我证明

有证据表明,上级对下属的业绩期望会促进下属更加自信并不断提高其业绩水平(Eden,1990)。当然,我们对于为什么上级的期望会影响到下属的业绩水平还不是特别清楚。有一种解释叫做“皮革马立翁效应”

(Eden,1984):如果上级认为下属很有能力,他就会对他特别关照,他的业绩也就很可能会有所提高;另一方面,任何人得知自己在别人眼中是一个很有能力的人以后,都会变得更加自信,并且努力做得更好。研究了大量的相关文献以后,Eden得出结论,评鉴中心也存在这种效应。Turnage和Muchinski(1984)也认为评鉴中心存在皮革马立翁效应,但是,他们未能提供相应的证据。在我看来,这很值得进一步探索。同样,我也试图在实践中通过评鉴中心强化测评对象的自信心。

显然,自我证明的现象并不会对评鉴中心的有效性造成太大的影响(Thornton&Byham,1982)。事实上,有研究表明,即使测评对象和他们的直接上级都没有得到任何反馈,评鉴中心的预测效度还是很高(Gauglereral.,1987)。这就是说,尽管测评对象怎样看待自己的才能水平可能会影响到他们的实际工作表现,但是如果我们不给测评对象任何反馈,即在不会影响他的自信水平的情况下,评鉴中心仍然能够预测到未来的成就。

业绩持续性

第一种观点认为,根据对测评对象的背景调查或者其以前的工作业绩,测评师能够预测其未来的绩效。这些信息可能有助于预测,但在许多评鉴中心中,测评师并不知道测评对象的姓名和背景。实际上,测评对象经常戴上不同颜色的袖标,以隐藏其真实身份。这种方法起源于战略服务办公室对(OfficeofStrategicServices,1948)对间谍的挑选,并且被业界长期使用。

第二种观点认为,情境模拟中的行为可以用来预测未来工作中的行为,因而就没有进行指标评价的必要。尽管这种观点并没有说明如果不进行指标评价,应该用哪种方法来替代它,但我们可以认为在逻辑上有两种可能。测评师可能会:(1)对每一项测评练习做出总体评价,或者(2)把不同的行为分配入不同的逻辑块(例如工作任务)中。第一种技巧已被人们所使用,第六章提出了有关的研究结论。我们的结论是:每项练习可以具有持续性和准确性,但在总体上不具有持续性,因而不可预测随后的工作业绩。然而,指标评价却具有总体上的持续性和准确性。这条证据本身既不能支持也不能反对业绩持续性的观点,因为所有的评鉴中心都把特质作为工作分析、练习设计、测评师培训和分类观察的原则。更重要的是,没有一个评鉴中心是单纯以测评练习作为评价的基础,而不把测评指标作为测评师观察的框架的。因而,我们可以推测,这种替代方法是有效的。

有证据表明,测评练习评价和测评指标共同使用比用单一方法更有效(Wollowick&McNamara,1969)。因而丢弃指标评价方法,采用其他不成熟的程序是不合适的。

没有证据表明,工作任务分类有助于行为观察。Adams(1990a)的实验表明,在准确性方面,工作任务分类与特质分类方法没有明显的不同。

其他的研究也证明了这一点。

管理智力

毋庸置疑,管理活动需要智力。能力和智力测验可以预测管理者成功与否,这些测验与评鉴中心的表现是吻合的(Klimoski&Brickner,1987;Thornton&Byham,1982)。真正的问题在于,情境练习能否比智力测验得到更多的东西。Wollowick和McNamara(1969)的研究证明了这一点。

他们发现,智力测验和测评指标共同使用,在预测方面要比使用单一方法更有效。我们可以得出结论,这种共同使用可以预测管理者是否能够成功。

结论

两种评鉴中心有效性的解释都有一点道理,但它们都不能充分揭示评鉴中心的准确性。与此同时,关于评鉴中心的研究显示:有充分的证据可以反驳以上两种观点。作者认为:测评师可以观察到情境练习中的行为,把这些行为进行分类以代表不同的特质,对总体表现作出判断,从而进行准确预测。因而,评鉴中心是有效的。

评鉴中心的效用:成本收益分析

使用某种人力资源管理工具的收益超过了成本,就能产生效用。

Cascio认为(1982)效用是对各种成本和收益的综合比较。这里的收益是指将人力资源管理工具应用于人事选拔或培训时所带来的好处。效度(validity)考察的是测验在多大程度上与实际的工作要求相吻合,效用(utility)考察的则是采用评鉴中心选拔雇员前后,提高的这部分工作业绩能否弥补相应的的成本(包括实施评鉴中心的管理成本)。在进行效用分析时,我们需要比较评鉴中心和原有的人事选拔程序的成本利润率。

效用分析中最重要的环节就是从经济的角度来界定人事选拔程序的价值。效用分析领域的最新研究成果使得人们有可能以美元为单位估算工作方法改善所带来的经济利益。

效用分析的方法可以说是多种多样(Boudreau,1983;Cascio,1982,1987)。在这里,我们不妨采用Schmidt,Hunter,McKenzie和Muldrow在1979年提出的模型。这一模型清楚地揭示了效用分析的关键要素。目前人们已经广泛应用这一模型来评价各种人事选拔工具(包括评鉴中心)。该模型如下:

U=tNs(r1-r2)SDyL/SR-Ns(c1-c2)/SR

其中,t=员工平均任职期限,Ns=筛选出的人数,r1=新工具的效度,r2=旧工具的效度,SDy=以美元计算的工作业绩的标准差,L=呈正态分布的中选率曲线纵坐标,SR=中选率(即实际聘用人数除以申请人数),c1=新工具的成本,c2=旧工具的成本。

Cascio和Ramos(1986)以及Burke和Frederick(1986)都作了评鉴中心的效用分析。他们的主要分析内容如表9.5所示。两次研究都在实践的基础上比较了评鉴中心和面试这两种管理人员选拔工具。结果表明,评鉴中心能给企业带来很高的回报:采用这种方法找到的管理人员平均每人每年能给企业带来2500至21000美元的利润。所以说,虽然评鉴中心的成本明显高于面试成本,但与收益的增加相比,这点成本又算得了什么呢?在人事选拔工具上的投资绝对可以给企业带来丰厚的回报。当然,我们接受这些数据的前提是对公式中用到的各种原始数据要有信心。

效度估算

同类推荐
  • 你的企业为什么不长久

    你的企业为什么不长久

    本书介绍了企业管理心理方面的内容,包括膨胀心理与规模扩张陷阱、赢家通吃心理与多元化陷阱、攻击性心理与对手陷阱、西方的保守死VS东方的冒进死等十二章。
  • 世界五百强企业的“纪律”法则

    世界五百强企业的“纪律”法则

    本书主要讲述的是作为职业人应该了解的职场纪律和我们应该有的规则意识、纪律意识。
  • 成功店长训练

    成功店长训练

    作为门市店经营的中坚角色,店长具有承上启下的作用。一个企业要开设一家甚至十几家分店并非难事,但要培养一个甚至十几个强有力的店长并非易事。本书将现代化门市店长应具备的经营管理运作上的技术与能力,包括店长应具备的商品战略管理、销售业绩管理、店铺人员管理、卖场管理与运作以及顾客服务与管理能力汇整而成。
  • 学会管理、学会营销(学会做人学会生活系列)

    学会管理、学会营销(学会做人学会生活系列)

    本书是目前针对管理这一主题最综合全面的一本图书,内容涵盖了今天的所有管理人员需要了解学习的有关管理的方方面面的知识,不但有实践的经验,还有日常面对问题的解决方案,以及雇佣与解聘、员工激励、委派授权、沟通、团队建设与管理、员工发展与训练等在当今商业社会管理人员需要了解的知识。
  • 让客户回头:超乎想象的客户服务6大宝典

    让客户回头:超乎想象的客户服务6大宝典

    影响时空管理丛书由影响力训练集团组织十几位专家、几十位学者、上百位培训界精英历经三年时间精心创作,内容注重实战,以解决企业管理实际问题为导向;论述深入浅出,通俗易懂;工具多、方法多、案例多,且经过多轮培训课程使用并经过多次修订,受到各层次管理者的欢迎和好评。本书提出了完善企业客户服务的6大宝典:客户服务的3重境界,打造高效服务团队的5大步骤,卓越客户服务人员的5项修炼,卓越客服人员的5大任务,客户服务的6大创新模式,应对客户抱怨和投诉的4个方面。
热门推荐
  • 一生的契约

    一生的契约

    十五年前的一次失误,结下了与你一生的契约
  • 比尔·盖茨的10大工作法则

    比尔·盖茨的10大工作法则

    本书系统地从多个方面和角度深人剖析了比尔·盖茨从创业之初到功成名就的种种工作实践,为读者总结出了10大工作法则:1.独立法则:独立自信地开展工作;2.时间法则:惜时如金地有效工作;3.心态法则:积极地投入工作;4.珍惜法则:抓住机遇成就工作;5.行动法则:激情满怀享受工作;6.决策法则:准确果断地决策工作;7.情报法则:海量信息充实工作;8.协作法则:高效团队提升工作;9.律己法则:严于律己完善工作;10.处事法则:和谐人际润滑工作。
  • 共你一世

    共你一世

    他的猛的抬头,一身红衣的少年就那样直直的撞入了眼眸,在心底激起千层浪花,久久未能平息。他见过不少穿红衣的人,也见过不少穿红衣的很好看的人,但从来没有见过能将红衣穿的那么那么那么……好看的人。
  • 万能兑换

    万能兑换

    2016第二次发书从从此以后不会断章有事情会提前告诉我就是这样新手上路练手上路
  • 妃要逃离蛇蝎王爷

    妃要逃离蛇蝎王爷

    穿越后三天就嫁入王府,新婚当夜却独守空房。旧情人,仇人一一浮出水面,究竟谁才可以相信。面对得来不易的亲情,却发现自己的身世牵扯着皇室的惊天大秘密。在揭开身世之谜的同时,又陷入了多个情劫之中。冷峻霸道的澹台誉,温柔专情的冷莫言,嬉笑幽默的童浩轩,心思缜密的尹辰逸。倾城弃妃——夜惜瞳,身在皇宫,究竟心归何处……
  • 剑戮仙城

    剑戮仙城

    剑大陆,实力为尊。因父辈重罪,少年出生便被禁止触碰剑道。悟性绝佳,族中书卷,十年饱览,已然成为理论大师。灭族灾中,少年终获得一线修剑希望,同辈笑他纸上谈兵。年月无声......剑大陆诞生了一位名震天地的剑技工程师,他开发的剑技,被修士们争得血雨腥风。而这位理论大师,同时也是令人胆颤的战斗宗师,不怕单挑,更不怕群战!无神则乾坤逆,有神则天地平,剑神之道,舍我其谁!
  • 欢乐的钢城

    欢乐的钢城

    2013年8月,图书馆张南征老师找我,说他写的钢铁系列小说第一部《无名沟轶事》、第二部《钢城之恋》两本书出版后,在社会上引起不少反响,借着这个东风,他写了第三部钢铁系列小说——《欢乐的钢城》,以此追溯那个伟大的时代,描绘生活在那个时代的人们的生活,想让我为这本书写篇序。
  • 《傻子公主来和亲》

    《傻子公主来和亲》

    她堂堂妖界九公主,却因败战而不得不替姐和亲从小的装疯卖啊,却依然逃不过被利用,为了始终护她的姐姐,好,她忍听闻魔君阴冷无比,没关系,她是傻子,无所谓笑看傻公主将魔宫搅得天翻地覆,魔君却无可奈何,她与他会擦出怎样的爱情火花
  • 第一宠后:皇上,请下榻

    第一宠后:皇上,请下榻

    (1v1,男女主身心干净)一场车祸,姜茶误入南诏王朝,一见钟情爱上淮南王帝惊澜,从此踏上为爱万死不辞的追夫之路。姜茶:王爷,我喜欢你。帝惊澜:你不是立誓要做皇后?姜茶:你娶我的话,不是皇后也没关系。帝惊澜:不娶。两年后,帝惊澜:嫁给我。姜茶:我又想做皇后了。帝惊澜:正好,我就缺一个皇后。【若爱隔山海,我便荡平这座江山。——帝惊澜】
  • 家有萌宠,花心老公来碗里

    家有萌宠,花心老公来碗里

    “喂喂喂,看谁呢!说的就是你!前面那位穿着白上衣黑长裤的小胖子姑娘!”顾封搂着一个胸大貌美屁股翘的美铝,笑得没心没肝的,就怕别人听不见似的在食堂大声嚷嚷着。众人默契的将目光投到了排在了老前面的某位有点小胖,白上衣黑裤子的妹纸身上。莫小二用脚趾头想都知道是自己那个冤家邻居又找上门来了,干脆不理他默默地排着队。顾封看着莫小二居然完全不理会自己,一想到自己在她眼中还不如食堂里的一条红烧鱼,气就不打一处来,干脆丢下身边的大美女,气冲冲走到前面从队伍里一把拉出莫小二。