登陆注册
4855900000029

第29章 评鉴中心的准确性(2)

毋庸置疑,某些评鉴中心确实存在一些问题。测评结果只是人们制定晋升决策的部分依据(实际上,这正是我们希望的)。但是,在衡量评鉴中心的质量水平时,就算上面提到的把测评结果用错地方的情况不存在,预测效度是不是就没问题呢?Thornton和Byham1982年的研究给出了肯定的答案。

1987年,Gaugler等人也设计了各种方案(如,研究无结果反馈的情况下评鉴中心效度如何,同步验证以及研究测评结果如何应用于决策等)。结果表明,预测效度的平均水平都差不多(见表9.3)。

他们的研究还指出,预测效度的高低并不受测评效标类型的影响。测评结果不仅能够预测晋升或加薪等前景,还能预测岗位工作业绩和培训效果等效标。当然,并不是所有效标都会受到严重影响。

Gaugler等人(1987)对前人的研究进行了总结和评价,并提出了质量指数的概念。这里的质量指数和准确程度正向相关,换句话说,质量指数越高,预测效度就越高。

接下来要讨论的几个例子并不存在现实的效标污染。AT&T的评鉴中心是这一领域的一个里程碑。企业中的任何个人(包括测评对象本人)都对评分过程一无所知,测评结果则存放在公司以外的地方。另一个是晋升案例,目的是挑选出中层管理岗位的候选人。在评鉴中心结束较长一段时间后(这时,基层管理人员的业绩表现已经显露得比较充分了),真正的晋升决策才诞生。这种情况下,我们完全可以认为晋升的依据不是测评结果而是业绩表现。

另外,根据Tziner,Ronen和Hacohen(1990)的研究结果,评鉴中心可以对某些效标(如上级对测评对象业绩的评价,测评对象未来的发展情况等)进行预测。这种预测的准确性绝对可靠。Gluski和Sherman(1989)也得出了类似的结论。

总而言之,虽然预测准确程度可能被人为地提高了,但是还有一些研究证明,并不是所有效标都会受到测评结果的影响。况且,有的研究认为测评结果不容易在企业里传播开来,因此“现实的效标污染”似乎还不足以解释评鉴中心的有效性。

潜在的效标污染

这种观点认为评鉴中心的效标本身(业绩评估和晋升情况)可能和工作效果发生了混淆。有人认为警署的官员们看上去就是做警官的料,比如说“他们的个头都比较高”

(Guion,1987)。这种印象甚至影响到了某警署评鉴中心的评分,也影响到了警察们的业绩评估。于是,就有人说,正是由于都受到这种偏见的影响,评鉴中心的评分和实际效标才会趋于一致。这种说法的破绽有三:

首先,评鉴中心的效标多种多样,绝不仅仅是上级的业绩评估和晋升意向。表9.4表明,综合考虑不同的效标,评鉴中心的预测准确性完全可以得到验证(Gaugleretal.,1987)。这里的效标包括独立第三方观察员的评价(Bray&Campbell,1968)、下属的评价(McEvoy&Beatty,1989;Schmittetal.,1990)、所辖部门员工流动率(K.C.Ague,1971)、600位中高层管理人员在目标管理体系中的业绩(Britz,1989)以及若干电话销售代理商的销售业绩(Squires,1988)等。

所有效标不可能都受到某种所谓的“好员工”印象的影响。研究评鉴中心的人饱受效标问题的折磨(产业与组织心理学家也有这种经历)(Smith,1976),并且找到了目前为止可能是最好的衡量工作业绩的方法。

因此,我们可以说,评鉴中心在这方面的研究水平不低于产业心理学和人力资源管理的其他任何领域。

总之,对于个别测评指标而言,效度系数可能的确被高估了。但是,另外一些测评指标则不存在这种情况。

其次,每一个评鉴中心都有多名测评师参加。这些人包括企业中的高级管理人员,人力资源工作者、产业和组织心理学家、临床和咨询心理学家、管理咨询顾问以及来自其他企业的管理人员。目前还没有研究能够表明上述所有测评师的测评结果是否具有同样的预测效度。但我们还是找到了部分意义上的研究成果。说这是部分意义上的,因为它只对部分测评师做了比较。Gaugler等人(1987)研究了心理学家和管理人员这两类测评师,结论是,在心理学家和管理人员共同担任测评师的情况下,预测效度最高。

第三,就算个别管理者对“什么样的人会成为优秀管理者”有某种刻板印象,没有评鉴中心的帮助,他还是很难准确地预测其他人未来的业绩水平。另外,就算测评对象的直接上级能够预见到下属未来的业绩,他们也不能就更高级的管理岗位做出预测(Bernardin&Beatty,1984;McEvoy&Beatty,1988;Murphy&Cleveland,1991)。因此,企业往往还是要转向评鉴中心。

自我证明

有证据表明,上级对下属的业绩期望会促进下属更加自信并不断提高其业绩水平(Eden,1990)。当然,我们对于为什么上级的期望会影响到下属的业绩水平还不是特别清楚。有一种解释叫做“皮革马立翁效应”

(Eden,1984):如果上级认为下属很有能力,他就会对他特别关照,他的业绩也就很可能会有所提高;另一方面,任何人得知自己在别人眼中是一个很有能力的人以后,都会变得更加自信,并且努力做得更好。研究了大量的相关文献以后,Eden得出结论,评鉴中心也存在这种效应。Turnage和Muchinski(1984)也认为评鉴中心存在皮革马立翁效应,但是,他们未能提供相应的证据。在我看来,这很值得进一步探索。同样,我也试图在实践中通过评鉴中心强化测评对象的自信心。

显然,自我证明的现象并不会对评鉴中心的有效性造成太大的影响(Thornton&Byham,1982)。事实上,有研究表明,即使测评对象和他们的直接上级都没有得到任何反馈,评鉴中心的预测效度还是很高(Gauglereral.,1987)。这就是说,尽管测评对象怎样看待自己的才能水平可能会影响到他们的实际工作表现,但是如果我们不给测评对象任何反馈,即在不会影响他的自信水平的情况下,评鉴中心仍然能够预测到未来的成就。

业绩持续性

第一种观点认为,根据对测评对象的背景调查或者其以前的工作业绩,测评师能够预测其未来的绩效。这些信息可能有助于预测,但在许多评鉴中心中,测评师并不知道测评对象的姓名和背景。实际上,测评对象经常戴上不同颜色的袖标,以隐藏其真实身份。这种方法起源于战略服务办公室对(OfficeofStrategicServices,1948)对间谍的挑选,并且被业界长期使用。

第二种观点认为,情境模拟中的行为可以用来预测未来工作中的行为,因而就没有进行指标评价的必要。尽管这种观点并没有说明如果不进行指标评价,应该用哪种方法来替代它,但我们可以认为在逻辑上有两种可能。测评师可能会:(1)对每一项测评练习做出总体评价,或者(2)把不同的行为分配入不同的逻辑块(例如工作任务)中。第一种技巧已被人们所使用,第六章提出了有关的研究结论。我们的结论是:每项练习可以具有持续性和准确性,但在总体上不具有持续性,因而不可预测随后的工作业绩。然而,指标评价却具有总体上的持续性和准确性。这条证据本身既不能支持也不能反对业绩持续性的观点,因为所有的评鉴中心都把特质作为工作分析、练习设计、测评师培训和分类观察的原则。更重要的是,没有一个评鉴中心是单纯以测评练习作为评价的基础,而不把测评指标作为测评师观察的框架的。因而,我们可以推测,这种替代方法是有效的。

有证据表明,测评练习评价和测评指标共同使用比用单一方法更有效(Wollowick&McNamara,1969)。因而丢弃指标评价方法,采用其他不成熟的程序是不合适的。

没有证据表明,工作任务分类有助于行为观察。Adams(1990a)的实验表明,在准确性方面,工作任务分类与特质分类方法没有明显的不同。

其他的研究也证明了这一点。

管理智力

毋庸置疑,管理活动需要智力。能力和智力测验可以预测管理者成功与否,这些测验与评鉴中心的表现是吻合的(Klimoski&Brickner,1987;Thornton&Byham,1982)。真正的问题在于,情境练习能否比智力测验得到更多的东西。Wollowick和McNamara(1969)的研究证明了这一点。

他们发现,智力测验和测评指标共同使用,在预测方面要比使用单一方法更有效。我们可以得出结论,这种共同使用可以预测管理者是否能够成功。

结论

两种评鉴中心有效性的解释都有一点道理,但它们都不能充分揭示评鉴中心的准确性。与此同时,关于评鉴中心的研究显示:有充分的证据可以反驳以上两种观点。作者认为:测评师可以观察到情境练习中的行为,把这些行为进行分类以代表不同的特质,对总体表现作出判断,从而进行准确预测。因而,评鉴中心是有效的。

评鉴中心的效用:成本收益分析

使用某种人力资源管理工具的收益超过了成本,就能产生效用。

Cascio认为(1982)效用是对各种成本和收益的综合比较。这里的收益是指将人力资源管理工具应用于人事选拔或培训时所带来的好处。效度(validity)考察的是测验在多大程度上与实际的工作要求相吻合,效用(utility)考察的则是采用评鉴中心选拔雇员前后,提高的这部分工作业绩能否弥补相应的的成本(包括实施评鉴中心的管理成本)。在进行效用分析时,我们需要比较评鉴中心和原有的人事选拔程序的成本利润率。

效用分析中最重要的环节就是从经济的角度来界定人事选拔程序的价值。效用分析领域的最新研究成果使得人们有可能以美元为单位估算工作方法改善所带来的经济利益。

效用分析的方法可以说是多种多样(Boudreau,1983;Cascio,1982,1987)。在这里,我们不妨采用Schmidt,Hunter,McKenzie和Muldrow在1979年提出的模型。这一模型清楚地揭示了效用分析的关键要素。目前人们已经广泛应用这一模型来评价各种人事选拔工具(包括评鉴中心)。该模型如下:

U=tNs(r1-r2)SDyL/SR-Ns(c1-c2)/SR

其中,t=员工平均任职期限,Ns=筛选出的人数,r1=新工具的效度,r2=旧工具的效度,SDy=以美元计算的工作业绩的标准差,L=呈正态分布的中选率曲线纵坐标,SR=中选率(即实际聘用人数除以申请人数),c1=新工具的成本,c2=旧工具的成本。

Cascio和Ramos(1986)以及Burke和Frederick(1986)都作了评鉴中心的效用分析。他们的主要分析内容如表9.5所示。两次研究都在实践的基础上比较了评鉴中心和面试这两种管理人员选拔工具。结果表明,评鉴中心能给企业带来很高的回报:采用这种方法找到的管理人员平均每人每年能给企业带来2500至21000美元的利润。所以说,虽然评鉴中心的成本明显高于面试成本,但与收益的增加相比,这点成本又算得了什么呢?在人事选拔工具上的投资绝对可以给企业带来丰厚的回报。当然,我们接受这些数据的前提是对公式中用到的各种原始数据要有信心。

效度估算

同类推荐
  • 甩手掌柜的用人哲学

    甩手掌柜的用人哲学

    本书介绍了人才管理方面的内容,告诉管理者如何让员工最大限度地发挥作用、如何为公司物色得力的人手、如何培养一批自己的业务骨干、如何留住并用好那些有本事的人等。
  • 顶级管理:聆听世界顶级管理大师智慧之声

    顶级管理:聆听世界顶级管理大师智慧之声

    本书集中了40位世界顶级管理思想大师的智慧,并简要和重点摘述了每位大师的管理思想,评估了他们对今日商业世界的影响和流传的价值,从而涉取全球管理思想之精华,使你有机会聆听最聪明、最优秀的学者如何看待管理领域,为你提供独一无二的机会思考各种观点。重温顶尖管理大师们的光辉思想,领悟他们精辟而深邃的智慧,是一个震撼心灵的过程。 榜样的力量是无穷的!我们把世界公认的顶级管理大师最精要的论述呈现给每一位立志在商业界、管理界出类拔萃的企业家、经理人以及每一位对管理思想感兴趣的人,以便您能领先一步,高人一筹。
  • 宋代管理思想:基于政策工具视角的研究

    宋代管理思想:基于政策工具视角的研究

    本书阐述了宋代复杂的经济、政治、文化活动产生的问题,探究了古代管理思想从统治向治理的转化。分析了宋代管理思想的三个层面:以政府协调为主的治理思想,包括特许经营与契约治理思想、政府劝勉与调解思想;以政府管制为主的治理思想,包括政府命令与禁戒思想、财政赋役治理思想;以政府服务为主的治理思想,包括公共事业思想、政府救助思想等内容。
  • 广告哲学

    广告哲学

    《广告哲学》首次将广告学纳入哲学框架以哲学视角进行研究,通过“广告美学”、“广告思维学”、“广告道德学”、“广告哲学”、“技术哲学与广”等章阐述,力图将广告学研究推进到一个更高层次,以探索出其发展变化中的本质规律,力图对广告学做出科学严谨之总结,并试图以此理论更好地指导人们的广告活动实践。
  • 温州人凭什么发财

    温州人凭什么发财

    温州人在“无资金、无技术、无市场”的情况下白手创业,起点低,风险小,回报率稳定,被誉为“东方犹太人”。他们关注市场,不在乎形式。当人们都在一味地追求“最好”时,温州人重视的却是什么是最适合自己的东西。温州商人所取得的成绩为世人所注目,吸引着许多人学习他们的经商模式,探寻他们的创业致富精神。《温州人:凭什么发财》从温州人生存理念、思维方式、经商手段、金钱观念、创业精神等方面讲述了他们创业致富的风雨历程。事例生动,故事感人,文笔清新,具有很强的借鉴意义,是立志从商者必读宝典。
热门推荐
  • 无饥饿慢消化减肥方案

    无饥饿慢消化减肥方案

    身材走形、体重攀升,步入中年的你有这些困扰吗?您的脂肪超标了吗?一台仪器就能轻松测出。有的朋友一直在减肥,从30多岁减了20多年了,却越减越肥。其实减这几斤没用,你知道是为什么吗?迈开腿,更要管住嘴,健康食品,您吃对了吗?不要以为纯果汁,你就可以随便喝了。鸡翅膀是鸡身上脂肪最高的部位之一。牛油果、榴莲、香蕉,就这三样,吃它跟吃米饭差不多。其实大家老以为玉米是一个粗粮啊,一定是减肥时候吃好,不一定。中国农业大学食品科学博士范志红老师带您探寻日常生活中的减肥秘诀。带您一起寻找隐藏在身边的小妙招,健康美食还您苗条身材。减肥不再是难题,美味食谱让您跟肥肉说再见。
  • 网游之千里之行

    网游之千里之行

    第一款全息网游DFT,打开了网游史上的新篇章,风云际会,人才代出一个横空出世的弓箭手,小学生的性格,大神的技术,到处惹是生非,搅得一潭血雨腥风却有个一身正气的搭档他们与不断邂逅的小伙伴们,一路闯天涯。千里之行,始于足下。
  • 总裁大人爱上我

    总裁大人爱上我

    你见过只见过三面的人就订婚的人么?你见过一个被誉为传奇的人对女人宠的无下限么?你见过一个受尽宠爱,集万千风华于一身的女人自力更生么?好吧,这些您都见过了……但是,有你没见过的,那就是——传奇之间的苦深爱恋!如果你都见过,那就当见证一场爱的萌发、成长、结果吧!本文一对一,很纯很纯。(本文主角都是豪门出生,但孩子们很独立,非常独立)
  • 万界仙踪

    万界仙踪

    S级异能者卓文穿越了,这一世他最大的愿望就是混吃等死!恩!如果说,他还有点什么小追求的话?在混吃等死的过程中长生不死,这个,算不算?
  • 冷王追妻,弃妃不承欢

    冷王追妻,弃妃不承欢

    安安觉得她可能是历史上最倒霉的穿越女了。莫名其妙的赶了回穿越的潮流不说,毕竟传闻古代盛产美男,开开眼也不错啊。但是……为什么她穿越过去的时候已经嫁人了!她的美男啊!为什么还是一个被贬为弃妃的王妃!说好的锦衣玉食,美衣华服呢!为什么相公是一个比冰块还冷的王爷!说好的一生一世一双人呢!最重要的是好不容易和冰块王爷解除了关系,他为什么还是要来骚扰她、调戏她、勾搭她?“王爷,你有没有听说过一句话。”安安看着一天里第N次出现在她面前偶遇的某王爷冷冷的说道。“什么话?”某王爷表面冷漠,内心激动的问道。“好马不吃回头草!王爷,弃妃不承欢!”【情节虚构,请勿模仿】
  • 白色眷恋

    白色眷恋

    因为不满皇马6比2的比分,中国青年律师沈星怒砸啤酒瓶,结果电光火石间,他穿越成了佛罗伦蒂诺的儿子,且看来自09年的小伙子如何玩转03年的欧洲足坛
  • 诱惑你没商量

    诱惑你没商量

    家里养了一个大帅哥你要怎么做?丁辰:泡他,睡他。这个帅哥强大到能轻易挣脱你的圈制,你要怎么办?丁辰:睡他,让他上瘾。(能不能不要动不动使用“武力”?)即使上瘾仍坚决离开你呢?丁辰:引诱他,让他乖乖回来。......作为被泡的男猪脚,你有什么话要说?于子墨(表情委屈):......动用“武力”我都认了,就是能不能别在外彩旗飘飘?......她撒网,只为让他爱上她。他上套,却被困阻在爱与恨之间不得挣脱。爱情是什么?是她不断引诱与逼近,却也是他不断包容甚至默许。即便他们爱情的起点是一个谎言,这么多年他习惯了她,眼里也只有了她......(结局HE)
  • TFBoys之唯美爱恋

    TFBoys之唯美爱恋

    作者第一次发文,求支持(?>ω<*?)三个女孩–––公孙梓凉,米歆糖,南宫筱郁和三小只–––王俊凯,王源,易烊千玺的唯美爱恋,一次偶然的相遇,一场轰轰烈烈的爱情,年少的我们把那一份爱藏在心里,却隐藏不了那场唯恋......
  • 穿越之我愿成仙

    穿越之我愿成仙

    五五只是个现代平凡的修仙者,奈何师兄师姐,就连小师妹都已随师傅得道,把五五的师傅乃至她道门中的一派子弟们急得团团转。于是,就在某天的早晨,五五在睡了一个美美的午觉后,发现她穿。越。了。。可后来五五才发现,一切皆是天意。~~~~~~~~~~~~~
  • 梦里的流萤

    梦里的流萤

    一部大学校园里的青春风暴。学习,生活,友谊,情感的天地。他纯真,善良,英俊潇洒;她美丽,聪慧,魅力四射!他们在四年的时光里有怎样的故事?命运无法动摇,梦想一次次起航!如果婚姻是爱情的坟墓,那么青春又是谁的新娘?!