登陆注册
4855900000029

第29章 评鉴中心的准确性(2)

毋庸置疑,某些评鉴中心确实存在一些问题。测评结果只是人们制定晋升决策的部分依据(实际上,这正是我们希望的)。但是,在衡量评鉴中心的质量水平时,就算上面提到的把测评结果用错地方的情况不存在,预测效度是不是就没问题呢?Thornton和Byham1982年的研究给出了肯定的答案。

1987年,Gaugler等人也设计了各种方案(如,研究无结果反馈的情况下评鉴中心效度如何,同步验证以及研究测评结果如何应用于决策等)。结果表明,预测效度的平均水平都差不多(见表9.3)。

他们的研究还指出,预测效度的高低并不受测评效标类型的影响。测评结果不仅能够预测晋升或加薪等前景,还能预测岗位工作业绩和培训效果等效标。当然,并不是所有效标都会受到严重影响。

Gaugler等人(1987)对前人的研究进行了总结和评价,并提出了质量指数的概念。这里的质量指数和准确程度正向相关,换句话说,质量指数越高,预测效度就越高。

接下来要讨论的几个例子并不存在现实的效标污染。AT&T的评鉴中心是这一领域的一个里程碑。企业中的任何个人(包括测评对象本人)都对评分过程一无所知,测评结果则存放在公司以外的地方。另一个是晋升案例,目的是挑选出中层管理岗位的候选人。在评鉴中心结束较长一段时间后(这时,基层管理人员的业绩表现已经显露得比较充分了),真正的晋升决策才诞生。这种情况下,我们完全可以认为晋升的依据不是测评结果而是业绩表现。

另外,根据Tziner,Ronen和Hacohen(1990)的研究结果,评鉴中心可以对某些效标(如上级对测评对象业绩的评价,测评对象未来的发展情况等)进行预测。这种预测的准确性绝对可靠。Gluski和Sherman(1989)也得出了类似的结论。

总而言之,虽然预测准确程度可能被人为地提高了,但是还有一些研究证明,并不是所有效标都会受到测评结果的影响。况且,有的研究认为测评结果不容易在企业里传播开来,因此“现实的效标污染”似乎还不足以解释评鉴中心的有效性。

潜在的效标污染

这种观点认为评鉴中心的效标本身(业绩评估和晋升情况)可能和工作效果发生了混淆。有人认为警署的官员们看上去就是做警官的料,比如说“他们的个头都比较高”

(Guion,1987)。这种印象甚至影响到了某警署评鉴中心的评分,也影响到了警察们的业绩评估。于是,就有人说,正是由于都受到这种偏见的影响,评鉴中心的评分和实际效标才会趋于一致。这种说法的破绽有三:

首先,评鉴中心的效标多种多样,绝不仅仅是上级的业绩评估和晋升意向。表9.4表明,综合考虑不同的效标,评鉴中心的预测准确性完全可以得到验证(Gaugleretal.,1987)。这里的效标包括独立第三方观察员的评价(Bray&Campbell,1968)、下属的评价(McEvoy&Beatty,1989;Schmittetal.,1990)、所辖部门员工流动率(K.C.Ague,1971)、600位中高层管理人员在目标管理体系中的业绩(Britz,1989)以及若干电话销售代理商的销售业绩(Squires,1988)等。

所有效标不可能都受到某种所谓的“好员工”印象的影响。研究评鉴中心的人饱受效标问题的折磨(产业与组织心理学家也有这种经历)(Smith,1976),并且找到了目前为止可能是最好的衡量工作业绩的方法。

因此,我们可以说,评鉴中心在这方面的研究水平不低于产业心理学和人力资源管理的其他任何领域。

总之,对于个别测评指标而言,效度系数可能的确被高估了。但是,另外一些测评指标则不存在这种情况。

其次,每一个评鉴中心都有多名测评师参加。这些人包括企业中的高级管理人员,人力资源工作者、产业和组织心理学家、临床和咨询心理学家、管理咨询顾问以及来自其他企业的管理人员。目前还没有研究能够表明上述所有测评师的测评结果是否具有同样的预测效度。但我们还是找到了部分意义上的研究成果。说这是部分意义上的,因为它只对部分测评师做了比较。Gaugler等人(1987)研究了心理学家和管理人员这两类测评师,结论是,在心理学家和管理人员共同担任测评师的情况下,预测效度最高。

第三,就算个别管理者对“什么样的人会成为优秀管理者”有某种刻板印象,没有评鉴中心的帮助,他还是很难准确地预测其他人未来的业绩水平。另外,就算测评对象的直接上级能够预见到下属未来的业绩,他们也不能就更高级的管理岗位做出预测(Bernardin&Beatty,1984;McEvoy&Beatty,1988;Murphy&Cleveland,1991)。因此,企业往往还是要转向评鉴中心。

自我证明

有证据表明,上级对下属的业绩期望会促进下属更加自信并不断提高其业绩水平(Eden,1990)。当然,我们对于为什么上级的期望会影响到下属的业绩水平还不是特别清楚。有一种解释叫做“皮革马立翁效应”

(Eden,1984):如果上级认为下属很有能力,他就会对他特别关照,他的业绩也就很可能会有所提高;另一方面,任何人得知自己在别人眼中是一个很有能力的人以后,都会变得更加自信,并且努力做得更好。研究了大量的相关文献以后,Eden得出结论,评鉴中心也存在这种效应。Turnage和Muchinski(1984)也认为评鉴中心存在皮革马立翁效应,但是,他们未能提供相应的证据。在我看来,这很值得进一步探索。同样,我也试图在实践中通过评鉴中心强化测评对象的自信心。

显然,自我证明的现象并不会对评鉴中心的有效性造成太大的影响(Thornton&Byham,1982)。事实上,有研究表明,即使测评对象和他们的直接上级都没有得到任何反馈,评鉴中心的预测效度还是很高(Gauglereral.,1987)。这就是说,尽管测评对象怎样看待自己的才能水平可能会影响到他们的实际工作表现,但是如果我们不给测评对象任何反馈,即在不会影响他的自信水平的情况下,评鉴中心仍然能够预测到未来的成就。

业绩持续性

第一种观点认为,根据对测评对象的背景调查或者其以前的工作业绩,测评师能够预测其未来的绩效。这些信息可能有助于预测,但在许多评鉴中心中,测评师并不知道测评对象的姓名和背景。实际上,测评对象经常戴上不同颜色的袖标,以隐藏其真实身份。这种方法起源于战略服务办公室对(OfficeofStrategicServices,1948)对间谍的挑选,并且被业界长期使用。

第二种观点认为,情境模拟中的行为可以用来预测未来工作中的行为,因而就没有进行指标评价的必要。尽管这种观点并没有说明如果不进行指标评价,应该用哪种方法来替代它,但我们可以认为在逻辑上有两种可能。测评师可能会:(1)对每一项测评练习做出总体评价,或者(2)把不同的行为分配入不同的逻辑块(例如工作任务)中。第一种技巧已被人们所使用,第六章提出了有关的研究结论。我们的结论是:每项练习可以具有持续性和准确性,但在总体上不具有持续性,因而不可预测随后的工作业绩。然而,指标评价却具有总体上的持续性和准确性。这条证据本身既不能支持也不能反对业绩持续性的观点,因为所有的评鉴中心都把特质作为工作分析、练习设计、测评师培训和分类观察的原则。更重要的是,没有一个评鉴中心是单纯以测评练习作为评价的基础,而不把测评指标作为测评师观察的框架的。因而,我们可以推测,这种替代方法是有效的。

有证据表明,测评练习评价和测评指标共同使用比用单一方法更有效(Wollowick&McNamara,1969)。因而丢弃指标评价方法,采用其他不成熟的程序是不合适的。

没有证据表明,工作任务分类有助于行为观察。Adams(1990a)的实验表明,在准确性方面,工作任务分类与特质分类方法没有明显的不同。

其他的研究也证明了这一点。

管理智力

毋庸置疑,管理活动需要智力。能力和智力测验可以预测管理者成功与否,这些测验与评鉴中心的表现是吻合的(Klimoski&Brickner,1987;Thornton&Byham,1982)。真正的问题在于,情境练习能否比智力测验得到更多的东西。Wollowick和McNamara(1969)的研究证明了这一点。

他们发现,智力测验和测评指标共同使用,在预测方面要比使用单一方法更有效。我们可以得出结论,这种共同使用可以预测管理者是否能够成功。

结论

两种评鉴中心有效性的解释都有一点道理,但它们都不能充分揭示评鉴中心的准确性。与此同时,关于评鉴中心的研究显示:有充分的证据可以反驳以上两种观点。作者认为:测评师可以观察到情境练习中的行为,把这些行为进行分类以代表不同的特质,对总体表现作出判断,从而进行准确预测。因而,评鉴中心是有效的。

评鉴中心的效用:成本收益分析

使用某种人力资源管理工具的收益超过了成本,就能产生效用。

Cascio认为(1982)效用是对各种成本和收益的综合比较。这里的收益是指将人力资源管理工具应用于人事选拔或培训时所带来的好处。效度(validity)考察的是测验在多大程度上与实际的工作要求相吻合,效用(utility)考察的则是采用评鉴中心选拔雇员前后,提高的这部分工作业绩能否弥补相应的的成本(包括实施评鉴中心的管理成本)。在进行效用分析时,我们需要比较评鉴中心和原有的人事选拔程序的成本利润率。

效用分析中最重要的环节就是从经济的角度来界定人事选拔程序的价值。效用分析领域的最新研究成果使得人们有可能以美元为单位估算工作方法改善所带来的经济利益。

效用分析的方法可以说是多种多样(Boudreau,1983;Cascio,1982,1987)。在这里,我们不妨采用Schmidt,Hunter,McKenzie和Muldrow在1979年提出的模型。这一模型清楚地揭示了效用分析的关键要素。目前人们已经广泛应用这一模型来评价各种人事选拔工具(包括评鉴中心)。该模型如下:

U=tNs(r1-r2)SDyL/SR-Ns(c1-c2)/SR

其中,t=员工平均任职期限,Ns=筛选出的人数,r1=新工具的效度,r2=旧工具的效度,SDy=以美元计算的工作业绩的标准差,L=呈正态分布的中选率曲线纵坐标,SR=中选率(即实际聘用人数除以申请人数),c1=新工具的成本,c2=旧工具的成本。

Cascio和Ramos(1986)以及Burke和Frederick(1986)都作了评鉴中心的效用分析。他们的主要分析内容如表9.5所示。两次研究都在实践的基础上比较了评鉴中心和面试这两种管理人员选拔工具。结果表明,评鉴中心能给企业带来很高的回报:采用这种方法找到的管理人员平均每人每年能给企业带来2500至21000美元的利润。所以说,虽然评鉴中心的成本明显高于面试成本,但与收益的增加相比,这点成本又算得了什么呢?在人事选拔工具上的投资绝对可以给企业带来丰厚的回报。当然,我们接受这些数据的前提是对公式中用到的各种原始数据要有信心。

效度估算

同类推荐
  • 创意大师的习惯

    创意大师的习惯

    在问及创意从何处来时,许多著名的创新者都表示,他们自己也不太清楚,想法自己就冒了出来,不过他们都明白,要是自己不采取行动,也会有别人这么做。这些创意大师并非人云亦云,他们说的自己的真情实感。有意思的是,他们中的很多人都表示,在产生创意的过程中,有一点非常重要,就是切莫骄傲自满。我们很有理由相信,伟大的创意就隐含在常识中,如果有人能将自己的思想和时代精神调齐,他们就能看到这些好主意,进而起到枢纽的作用,把这些想法应用于现实。
  • 听龙永图谈经济与经营之道

    听龙永图谈经济与经营之道

    中国经济已走到全球化发展的关键时刻。中国经济如何在战略大调整中保持旺盛生命力,中国企业如何才能与世界500强企业比肩,中国品牌如何在国际道路上披荆斩棘,中国企业如何应对经济危机?中国复关及入世谈判的首席谈判代表,原国家外经贸部副部长、博鳌亚洲论坛理事、秘书长龙永图先生对上述问题提供了自己见解。
  • 品孙子兵法学管理

    品孙子兵法学管理

    本书是我国同时也是世界现存最古老的一部兵书,涉及管理学、战略管理学等诸多方面。内容包括:料敌制胜的战略管理、未战而庙算的决策管理战略、力求全胜的目标管理战略、选贤任能的人才管理战略等。
  • 胡雪岩商道宝典:致富的百种计谋

    胡雪岩商道宝典:致富的百种计谋

    本书采用典型案例故事加精要点评的形式,阐述了胡雪岩弄潮商海的百种智慧谋略。
  • 决定成败的66条管理警示

    决定成败的66条管理警示

    本书从管理者经常遇到的66个问题入手,深入浅出的分析了目前管理者可能遇到的一些实际经营问题,并配有大量的案例。
热门推荐
  • 最爱是你:S级特工组

    最爱是你:S级特工组

    风云雨,二十一世纪云天高中冷面校草一枚,学习成绩优异,家庭条件优良,车祸,本以为再也无法相见的两个人竟重新相遇!只是再次遇见,他却已经不记得她了。“你不记得我?没关系,我记得你就行啦!”“你不爱我了?没关系,只要我还爱你,就一定不会放弃!”看二十一世纪美少女千寒,穿越未知时空,重续前世恋情!与时空强者强强联手!
  • 随风飘走的日子

    随风飘走的日子

    原来的时候本来是想写一部关于我大学的回忆录,取名的时候,叫《随风飘走的日子》,正好那年出了林俊杰的《被风吹过的夏天》这首歌,一直以为是《随风飘过的夏天》于是我只好将书名改成我大学小组的名字《梦飞扬》。而且在之后,我重新增了一些人物进来,像成正,文靓,韩峰,初稿中都没有这三个人。但这不全是编造的,很多都是身边真实的故事。毕业很多年了,连同第一次写的《空灵》一起,我还是决定就叫《随风飘走的日子》以记念我们一去不返的大学时光。
  • 驴在江湖

    驴在江湖

    在被问及业余时间做什么取乐之前,一个人意识不到自己究竟有多无聊!如果有一个平台专门组织各种现实生活中的聚会和活动,帮你用尽可能少的成本邂逅无数帅哥美女;并一步步指引,教你如何在聚会和活动中玩的开心,玩的尽兴,你会不会注册会员?君陌和三个朋友一起创办的“驴在江湖”就是这样一个电商平台!草根创业,没资金没后台,公司成立了一年半就撑不下去了。两个合伙人离开后,君陌决定自己首先要在全国范围内玩遍‘驴在江湖’平台上的所有活动和聚会主题,以此掌握各种活动和聚会的举办精髓,从而来找到事业破局的方法!撩妹高手胖子陈适逢其时的加入了进来,于是在春暖花开的季节,两人开启了一段我带上你,你带上钱的说走就走旅行。
  • 仙朝霸业

    仙朝霸业

    一个不一样的修真世界。一个以仙国为主的修真世界仙村、仙镇……仙国,看主角如何一步步崛起。由一个小小的仙村里正成为无上仙朝的千古一帝。仙朝霸业,书写属于我的传奇!PS:书友群:558545994
  • 都在流逝

    都在流逝

    本书是我继《忙碌》的另一本短片文集,内容用三十万字左右,写于谢于还在年少时的幼期思想的进化和成长的过程中,目的在于给自己的人生留下一些成长的过程中的生命印记。未来,我依然还会努力创作,多谢。
  • 杀心成焚

    杀心成焚

    什么样的人才能算的上是英雄,荣誉?牺牲?英勇?怜悯?诚实?精神?公正?随着时代的过往,人们对于英雄的概念也在逐步改变,唯一不变的是英雄本身,任何一个时代都不缺乏英雄的存在,在于他们并肩同行的时候,你能真切的感受到他们身上那种浓郁的悲剧英雄的史诗情怀。
  • 恶魔校草:老婆,要乖

    恶魔校草:老婆,要乖

    “臭丫头,过来给我捶捶背。”恶魔“臭丫头,过来给给我抱一下。”恶魔“臭丫头,过来给我暖床。”恶魔“臭丫头,上来给我生猴子。”恶魔终于某女怒了“夏晨溪,你妹的给我滚。”某恶魔不要脸的笑了笑说:“好啊,老婆,我们一起滚。”
  • 呵护你的梦想

    呵护你的梦想

    本书收录了启迪中学生智慧的哲理美文,是引入深思的品格故事典范。其中每一篇故事都会贴近生活的写照,每一篇故事者哙拓宽你的文化视野,每一篇故事都会激发你的心灵,每一篇故事都会是一对翅膀,使你勇敢飞翔!从这些故事中你会找到一一成长和成才的启发,也会给你最深刻的认识,使你终身受益!这里.有优美而浪漫,让人馨香绕怀久久不忘的心灵独白;这里,有启迪青春、点缀人生、畅想未来的人生感悟;这里,有最具有代表性的或伤感或甜蜜或浪漫或纯情的情感故事;这里,有诗一样的文字,格言一样的论说……
  • exo之另类重生

    exo之另类重生

    逆世界爱恋,我们本事不同的世界不同的人生,不同的类型,不同………那么,我们怎么可能会在一起。
  • 墨玉天下:彼岸花开

    墨玉天下:彼岸花开

    千次的回眸、擦肩、相逢、相识、相知,佛语都一一成了现实,于是她平静的开,平静的落,平静的等待千年之后的爱……她,21世纪的隐世势力玉华宫的少宫主,绝世无双她,凤兮大陆的废材小姐,女扮男装,受家人宠爱当她成为了她,这凤兮大陆是否会起波澜?他,神秘莫测的魔帝,实力强大,腹黑强势当风华绝代的她遇上强势腹黑的他,又会有怎样的火花擦出呢?