福州市勘測院 趙毅

?

360°考核信度與效度檢驗(yàn)研究
——基于某國企

福州市勘測院 趙毅

摘 要：本文以績效理論為基礎(chǔ)，在某國有企業(yè)內(nèi)部收集員工年度考核問卷數(shù)據(jù)，通過統(tǒng)計分析，對問卷的內(nèi)部一致性、評分者一致性信度，以及結(jié)構(gòu)效度進(jìn)行量化檢驗(yàn)，為企業(yè)績效管理的優(yōu)化改進(jìn)提供依據(jù)，以期為我國企業(yè)績效管理的發(fā)展提供借鑒。

關(guān)鍵詞：績效管理 360°考核 信度 效度

1　問題的提出

績效考核（performance appraisal）是績效管理（performance management）三大環(huán)節(jié)（制定標(biāo)準(zhǔn)、績效考核、反饋與改進(jìn)）中非常重要的一環(huán)，在整個績效管理全過程中起著承上啟下的作用。可以說一個成功的薪酬管理機(jī)制，必然有一個科學(xué)高效的績效考核機(jī)制與之相配套。在當(dāng)前我國人力資源管理實(shí)踐中，許多企業(yè)開始使用科學(xué)的測度量表和信息系統(tǒng)，用于消除單一考評和其他干擾因素，提高績效管理的準(zhǔn)確性，360°考核是具有科學(xué)性和實(shí)用性的一種考核手段。由于360°考核來自上級、平級、下級等多個層面，因此能夠比較準(zhǔn)確地反映一個員工的績效，也由此為越來越多的企業(yè)所采用。據(jù)《財富》雜志評出的前1000家大企業(yè)中，有90%以上應(yīng)用了360°考核的部分或全部內(nèi)容，具有廣泛的實(shí)際應(yīng)用價值。

2　調(diào)查問卷的設(shè)計

調(diào)查問卷是國際上廣泛采用的一種調(diào)查研究方法，是進(jìn)行360°考核的基礎(chǔ)性工作，其質(zhì)量的高低直接影響著考核結(jié)果的可靠性與應(yīng)用性。本文中所使用的問卷構(gòu)建了以“ 策劃力、執(zhí)行力、管理力、凝聚力、工作績效”5個維度為一級指標(biāo)，按相應(yīng)權(quán)重劃分為12個二級指標(biāo)的評價指標(biāo)體系。

2.1評價主體的確定

本文以某國企二線職能部門中層干部年度績效評價為內(nèi)容，按照360°考核設(shè)計原則，選擇與被評者工作有聯(lián)系的人員作為評價主體，范圍涵蓋企業(yè)領(lǐng)導(dǎo)（上級）、平級（部門中層）、下級（基層員工），以及關(guān)聯(lián)人員（職代會代表、其他部門人員）、員工自評等，如圖1所示。

圖1　某國企360°評價模型示意圖

2.2績效評價體系的確定

首先，根據(jù)績效考核理論和企業(yè)實(shí)際，設(shè)計出“策劃力、執(zhí)行力、管理力、凝聚力、工作績效”5個一級結(jié)構(gòu)變量。其次，每個一級結(jié)構(gòu)變量可細(xì)分為相應(yīng)的二級變量，如策劃力包含“創(chuàng)造力、計劃性”，執(zhí)行力包含“主動性、準(zhǔn)確性、效率性”，工作績效包含“本職工作、重點(diǎn)工作”等。問卷按照百分制設(shè)計，每個一級結(jié)構(gòu)變量賦予20%權(quán)重；二級變量根據(jù)其特點(diǎn)給予相應(yīng)的權(quán)重賦值。如圖2所示。

圖2　某國企績效評價體系樹狀圖

2.3數(shù)據(jù)采集

本次考評方式為采取無記名投票方式。被評主體10名，評價主體31名，合計有效票數(shù)一共為310票，統(tǒng)計票數(shù)后按總分得分高低進(jìn)行排序。

3　信度與效度檢驗(yàn)

信度即問卷的“可信度”，是指運(yùn)用相同的方法對同一對象進(jìn)行多次重復(fù)測試后，所得出結(jié)果的一致性程度。在以信度系數(shù)進(jìn)行表示時，信度系數(shù)越大，則測試的可信度越高。效度（Validity）即問卷的“有效性”，是指問卷與其所欲測試的事物之間的契合度。在以效度系數(shù)進(jìn)行表示時，效度系數(shù)越大，則測試結(jié)果距其真實(shí)測試目的就越接近。

3.1信度檢驗(yàn)

信度分析方法主要包括：重測信度、復(fù)本信度、內(nèi)部一致性信度和評分者信度。本研究以SPSS Statistics 22為數(shù)據(jù)分析工具，分別采用克朗巴哈（Cronbach）α信度系數(shù)法、肯德爾（Kendall’s W）和諧系數(shù)法，對問卷的內(nèi)部一致性和評分者一致性進(jìn)行檢驗(yàn)。

（1）Cronbach α系數(shù)檢驗(yàn)。內(nèi)部一致性信度考察的是量表當(dāng)中條目與條目間的一致性，使用Cronbach α系數(shù)進(jìn)行檢驗(yàn)較為合適，其計算公式為：

表1　Reliability Statistics

（2）Kendall’s W系數(shù)檢驗(yàn)。評分者一致性考察的是評分者信度，Kendall’s W和諧系數(shù)能夠計算多個等級變量的相關(guān)程度，從而反映出多個評分者給同一批問卷進(jìn)行評分的一致性程度。當(dāng)評分者意見完全不一致或完全一致時，0≤W≤1。在進(jìn)行和諧系數(shù)計算及顯著性檢驗(yàn)前，先將各個評分者維度的變量進(jìn)行按秩排列，轉(zhuǎn)化為等級分?jǐn)?shù)。本文因存在相同等級的情況，因此，需要計算校正系數(shù)，計算公式為：

表2　Test Statistics

3.2效度檢驗(yàn)

信度系數(shù)的高低不一定與效度正相關(guān)，因此在信度分析的同時，需要進(jìn)一步進(jìn)行效度分析。效度分析方式主要有內(nèi)容效度（Content validity）、準(zhǔn)則效度（Criterion Validity）和結(jié)構(gòu)效度（Construct validity）。本項(xiàng)研究主要從結(jié)構(gòu)效度，即從問卷特質(zhì)測量程度入手進(jìn)行因子分析。根據(jù)統(tǒng)計理論觀點(diǎn)，如KMO值＞0.5，則可以進(jìn)行因子分析。

以一級變量為維度，進(jìn)行KMO及Bartlett’S球形檢驗(yàn)，KMO值為0.874，大于0.5，說明問卷的結(jié)構(gòu)效度較好。Bartlett’S球形檢驗(yàn)Sig=0，說明它的數(shù)據(jù)服從正態(tài)分布，適合進(jìn)行分析。如表3。

表3　KMO and Bartlett's Test

降維處理后，每個變量的變異均可由提取的因子有效解釋，提取的1個公因子解釋了總方差的93%。如表4。

表4　Total Variance Explained

對數(shù)據(jù)進(jìn)行二次整理，進(jìn)行回歸分析，評價總分與評價得分的線性相關(guān)度。如表5。

表5　Coefficientsa

從線性回歸分析可以看出，總分與提取的因子1的Sig顯著，也就是說10名被考評者的得分與其各項(xiàng)結(jié)構(gòu)變量（績效）是密切相關(guān)的，問卷考核的效度較佳。

4　結(jié)語

對問卷數(shù)據(jù)進(jìn)行分析，得到以下方面結(jié)論。

（1）問卷的內(nèi)部一致性信度在可接受的范圍內(nèi)，問卷統(tǒng)計結(jié)果具有實(shí)際價值，值得進(jìn)一步進(jìn)行分析；

（2）問卷的評分者信度較低，說明評分者評價離散程度較大，評價機(jī)制仍具有不完善之處，需加以改進(jìn)；

（3）問卷的結(jié)構(gòu)效度較高，使用因子分析，所提取的因子解釋總方差在90%以上，說明使用此測量工具如應(yīng)用得當(dāng)，能較有效反映其欲測度的人員實(shí)際績效。

為提高360°考核的信度與效度，筆者提出如下改進(jìn)建議。（1）正確遴選評價主體。360°考核是一種多源考核，但切忌“惟多源論”。首先應(yīng)選擇適合的評價主體，否則將造成評價主體良莠不齊，考核結(jié)果適得其反。故應(yīng)遴選與被考評者真正有較密切工作交集的、對其工作績效與工作特征充分了解的相關(guān)主體，確保評價的客觀與真實(shí)。（2）加強(qiáng)考評前培訓(xùn)?？荚u前有必要對考核者進(jìn)行培訓(xùn)，使每個考核主體都盡可能地對每個評價項(xiàng)目具有相同的理解，明確其含義，知道如何正確評分，從而最大限度地消除因人為因素造成信度降低，避免影響考評結(jié)果。

參考文獻(xiàn)

［1］ 張德.人力資源開發(fā)與管理［M］.北京：清華大學(xué)出版社，2012.

［2］ 宇傳華.SPSS與統(tǒng)計分析［M］.北京：電子工業(yè)出版社，2006.

［3］ 吳明隆.問卷統(tǒng)計分析實(shí)務(wù)［M］.重慶.重慶大學(xué)出版社，2010.

［4］ 張雪，林志健，董玲.基于360度模式的藥品安全監(jiān)管能力評價問卷設(shè)計［J］.中國藥事，2014（7）.

［5］ 劉暢.企業(yè)員工工作績效問卷的編制［J］.北華航天工業(yè)學(xué)院學(xué)報，2013（3）.

中圖分類號：F272

文獻(xiàn)標(biāo)識碼：A

文章編號：2096-0298（2016）06（c）-171-02

作者簡介：趙毅（1981-），男，福建福州人，經(jīng)濟(jì)師，碩士研究生，主要從事管理咨詢方面的研究。