Testați o grilă KPI înainte de lansare calculând-o pe 3–6 luni trecute, fără să comunicați rezultatele: verificați cum se împart scorurile pe niveluri, cât se mișcă rezultatele când schimbați ponderile, cât contează de fapt fiecare indicator și câte scoruri ies fără date. Articolul vă dă un exemplu calculat pe opt oameni, o metodă de a vedea ponderea „efectivă” a fiecărui indicator, criterii scrise de „gata de lansare” și un fișier Excel cu care refaceți simularea pe datele dumneavoastră.
Răspuns rapid. O grilă KPI se testează prin simulare pe date istorice: aplicați formula pe ultimele 3–6 luni, priviți distribuția scorurilor pe niveluri, comparați clasamentul obținut cu două seturi de ponderi și numărați scorurile fără date. Lansați grila doar când distribuția este plauzibilă, nicio parte nu domină neintenționat, iar fiecare caz ciudat are o explicație.
Ce înseamnă să testați o grilă KPI
Grila KPI reprezintă setul de indicatori ai unei funcții, cu ponderile, plafoanele, regulile pentru date lipsă și nivelurile care transformă cifrele într-un scor. Alegerea indicatorilor este subiectul ghidului despre cum alegeți indicatorii KPI. Aici grila există deja; întrebarea este dacă produce scoruri în care puteți avea încredere.
- Simularea retroactivă constă în aplicarea grilei noi pe perioade deja încheiate, fără ca rezultatele să conteze pentru cineva. În modelare, procedeul se numește backtesting.
- Analiza de sensibilitate măsoară cât se schimbă scorurile și clasamentul când modificați o alegere: o pondere, un plafon, un prag de nivel.
- Distribuția scorurilor arată câte persoane ajung pe fiecare nivel și cât de departe sunt scorurile unele de altele (minim, mediană, maxim, abatere standard).
- Ponderea nominală este procentul scris în grilă. Ponderea efectivă este cât contribuie de fapt un indicator la diferențele dintre oameni. Cele două pot fi foarte diferite.
- Pilotul constă în folosirea grilei 1–2 luni în paralel cu sistemul vechi, cu rezultate arătate oamenilor, dar fără efect asupra bonusului sau evaluării.
De ce nu ajunge să verificați formula
O formulă poate fi corectă matematic și totuși să producă scoruri inutile. Problemele apar abia când formula întâlnește datele reale ale unei luni întregi. Patru situații se văd doar în simulare.
- Un indicator domină. Indicatorul cu cea mai mare împrăștiere a valorilor decide clasamentul, chiar dacă ponderea lui scrisă nu este cea mai mare.
- Toată lumea iese pe același nivel. Pragurile nivelurilor sunt prea largi față de cât variază scorurile, iar grila nu mai deosebește pe nimeni.
- Plafonul atinge prea mulți oameni. Dacă jumătate din echipă stă la plafon la un indicator, indicatorul nu mai diferențiază deasupra țintei.
- Datele lipsesc sistematic. O sursă care nu vine la timp pentru o unitate întreagă transformă o problemă de date într-o diferență de scor.
Manualul OECD și al Centrului Comun de Cercetare al Comisiei Europene despre indicatorii compuși formulează același lucru pentru indicatorii statistici: ponderile pot avea un efect semnificativ asupra rezultatului și a clasamentului, iar robustețea se verifică prin analiză de incertitudine și de sensibilitate. O grilă KPI este, tehnic, un indicator compus pe o singură persoană.
Ce date vă trebuie pentru simulare
Folosiți valorile reale ale indicatorilor pentru ultimele 3–6 luni închise, pentru toți oamenii cărora li se va aplica grila. O singură lună nu ajunge: o lună excepțională se corectează adesea singură în luna următoare (fenomenul se numește regresie spre medie), iar o grilă testată pe ea ar fi reglată pe o excepție.
| Problemă de date | Cum se vede în simulare | Ce faceți înainte de lansare |
|---|---|---|
| Sursă care întârzie (raport încărcat după închidere) | Multe scoruri calculate din mai puține părți decât restul | Stabiliți data până la care se încarcă datele și cine răspunde de ea |
| Definiție diferită între unități (de exemplu, vânzări cu sau fără retururi) | O unitate întreagă mult peste sau sub celelalte | Unificați definiția și recalculați lunile de test |
| Oameni angajați sau plecați în perioadă | Scoruri extreme la persoane cu puține zile lucrate | Scrieți regula pentru luni incomplete (țintă proporțională sau „fără date”) |
| Indicator fără variație (toți au 100) | Partea nu schimbă nimic în clasament | Scoateți-l din pondere sau schimbați modul de notare |
Exemplu calculat: opt oameni, două seturi de ponderi
Exemplu ipotetic. Date fictive pentru opt consultanți de vânzări dintr-o rețea de magazine. Grila are trei părți: Vânzări (% din plan, plafon 120), Calitate (scorul auditului de servire, 0–100) și Evaluarea managerului (% din punctajul grilei). Niveluri: sub 85 „De îmbunătățit”, de la 85 „Bun”, de la 100 „Excelent”. Scorul este media ponderată a părților cu date; o parte fără date este lăsată deoparte, iar celelalte îi preiau ponderea.
Varianta A pune ponderile 50% / 30% / 20%. Varianta B mută 10 puncte de la vânzări la evaluare: 40% / 30% / 30%. Horia nu are evaluare în lună, așa că scorul lui se calculează din două părți.
| Angajat | Vânzări (după plafon) | Calitate | Evaluare | Scor A | Nivel A | Loc A | Scor B | Nivel B | Loc B |
|---|---|---|---|---|---|---|---|---|---|
| Ana | 118 | 84 | 76 | 99,40 | Bun | 2 | 95,20 | Bun | 2 |
| Bogdan | 104 | 96 | 100 | 100,80 | Excelent | 1 | 100,40 | Excelent | 1 |
| Cristina | 120 (realizat 132) | 72 | 64 | 94,40 | Bun | 4 | 88,80 | Bun | 6 |
| Dan | 81 | 86 | 88 | 83,90 | De îmbunătățit | 8 | 84,60 | De îmbunătățit | 8 |
| Elena | 99 | 90 | 86 | 93,70 | Bun | 5 | 92,40 | Bun | 4 |
| Florin | 72 | 98 | 96 | 84,60 | De îmbunătățit | 7 | 87,00 | Bun | 7 |
| Gabriela | 111 | 88 | 80 | 97,90 | Bun | 3 | 94,80 | Bun | 3 |
| Horia | 90 | 92 | fără date | 90,75 | Bun | 6 | 90,86 | Bun | 5 |
Fiecare scor se poate reface. Ana, varianta A: 118 × 0,5 + 84 × 0,3 + 76 × 0,2 = 59 + 25,2 + 15,2 = 99,40. Horia, varianta A: (90 × 0,5 + 92 × 0,3) ÷ 0,8 = 72,6 ÷ 0,8 = 90,75. Același Horia, varianta B: (36 + 27,6) ÷ 0,7 = 90,86.
Ce arată exemplul
- Un nivel se schimbă. Florin trece din „De îmbunătățit” (84,60) în „Bun” (87,00) doar pentru că s-au mutat 10 puncte de pondere. Dacă nivelul decide un bonus, decizia despre ponderi este o decizie despre banii lui Florin.
- Clasamentul se mișcă la mijloc. Cristina coboară de pe locul 4 pe locul 6; Elena și Horia urcă fiecare un loc. Primul și ultimul rămân pe loc.
- Distribuția se strânge. Varianta A dă minim 83,90, mediană 94,05, maxim 100,80 și abatere standard 5,98. Varianta B dă 84,60, 91,63, 100,40 și 4,74. Cu B, șase din opt oameni sunt „Bun”.
Ponderea nominală și ponderea efectivă
Un indicator influențează clasamentul în funcție de pondere și de cât diferă valorile între oameni. O estimare simplă este ponderea înmulțită cu abaterea standard a indicatorului, raportată la suma acestor produse. Estimarea ignoră corelațiile dintre indicatori, deci folosiți-o ca semnal, nu ca măsurătoare exactă.
| Parte | Abatere standard (după plafon) | Pondere nominală A | Pondere efectivă estimată A | Pondere nominală B | Pondere efectivă estimată B |
|---|---|---|---|---|---|
| Vânzări | 16,22 | 50% | 64,1% | 40% | 53,3% |
| Calitate | 7,58 | 30% | 18,0% | 30% | 18,7% |
| Evaluare | 11,34 | 20% | 17,9% | 30% | 28,0% |
În varianta A, vânzările au jumătate din pondere, dar explică aproape două treimi din diferențele dintre oameni. Calitatea are 30% scris, dar contribuie cu circa 18%, pentru că aproape toți au scoruri apropiate. Dacă intenția era ca grila să recompenseze calitatea, simularea arată că nu o face.
Calculul pentru vânzări, varianta A: 0,5 × 16,22 = 8,110; calitate 0,3 × 7,58 = 2,274; evaluare 0,2 × 11,34 = 2,268; suma 12,652; 8,110 ÷ 12,652 = 64,1%.
De reținut. Ponderea scrisă în grilă spune ce vreți să conteze. Simularea spune ce contează de fapt. Un indicator cu valori apropiate la toți oamenii are influență mică, oricât de mare îi este ponderea.
Cum citiți distribuția scorurilor
Nu există o distribuție „corectă” universală. O echipă selectată atent poate avea legitim mulți oameni „Bun”. Distribuția trebuie însă să fie plauzibilă pentru cine cunoaște echipa și să se poată explica.
| Ce vedeți | Ce înseamnă de obicei | Ce verificați |
|---|---|---|
| Toți pe același nivel | Pragurile sunt prea largi față de variația scorurilor | Pragurile nivelurilor, comparate cu minimul și maximul simulării |
| Majoritatea sub așteptări | Ținte nerealiste sau o sursă de date greșită | Țintele pe luni trecute și definițiile indicatorilor |
| Un grup separat de restul (de exemplu, o unitate) | Condiții diferite sau definiții diferite între unități | Dacă țintele trebuie diferențiate pe locații |
| Mulți oameni la plafon la aceeași parte | Ținta este prea joasă sau plafonul prea mic | Câți ating plafonul în fiecare lună de test |
| Multe scoruri „fără scor” sau din mai puține părți | Problemă de colectare a datelor | Cine încarcă datele și până când |
Pentru ținte diferite pe locații, citiți articolul despre ținte KPI pentru puncte de lucru diferite. Pentru regula de date lipsă la nivel de proces, articolul despre date lipsă în evaluarea performanței.
Criteriile de „gata de lansare”
Scrieți criteriile înainte de simulare, ca să nu le potriviți după rezultat. O listă de pornire, de adaptat:
- Fiecare indicator are definiție, sursă, responsabil de date și regulă pentru lipsă.
- Ponderile însumează 100%, iar ponderea efectivă estimată a fiecărei părți nu diferă de cea nominală cu mai mult decât ați decis că acceptați (de exemplu, 10 puncte procentuale).
- Pe fiecare lună de test, cel mult un procent stabilit dinainte din scoruri (de exemplu, 5%) iese din mai puține părți decât restul.
- Nicio parte nu are mai mult de un sfert din oameni la plafon, constant, în toate lunile.
- Distribuția pe niveluri este considerată plauzibilă de managerii care cunosc echipa, iar fiecare caz contestat are o explicație scrisă.
- O schimbare mică de pondere (5–10 puncte) nu mută mai mult de câțiva oameni de pe un nivel pe altul; dacă îi mută, știți de ce.
- Un exemplu complet de calcul este pregătit pentru comunicarea către oameni.
Pragurile din listă (10 puncte, 5%, un sfert) sunt alegeri de management, nu standarde. Important este să le fixați înainte de test.
Pașii pilotului
- Fixați versiunea de test. Notați ponderile, plafoanele, nivelurile și regula pentru date lipsă. Orice schimbare ulterioară devine altă versiune.
- Adunați datele. Ultimele 3–6 luni închise, pentru toată populația grilei, cu sursele care vor fi folosite și după lansare.
- Rulați simularea de bază. Notați pentru fiecare lună: câți au scor, câți nu, minim, mediană, maxim și distribuția pe niveluri.
- Testați sensibilitatea. Mutați 5–10 puncte de pondere între părți, schimbați plafonul și pragurile, câte o singură alegere pe rând. Notați cine schimbă nivelul.
- Calculați ponderea efectivă și comparați-o cu intenția. Corectați dacă o parte domină fără să fi vrut asta.
- Discutați cazurile ciudate cu managerii: un om bun cu scor mic, o lună cu multe date lipsă, o unitate separată de rest. Fiecare primește o explicație sau o corecție.
- Rulați pilotul 1–2 luni în paralel, cu scorurile arătate oamenilor și fără efect financiar. Strângeți întrebările lor.
- Verificați criteriile de lansare, publicați versiunea finală și comunicați-o cu un exemplu de calcul înainte de prima lună care contează.
Atenție. Codul muncii dă angajatorului dreptul să stabilească obiectivele de performanță individuală și criteriile de evaluare (art. 40 alin. (1) lit. f)), iar regulamentul intern trebuie să cuprindă criteriile și procedurile de evaluare profesională (art. 242 lit. i)). Testarea în sine este o recomandare de management. Dacă scorul influențează salariul sau bonusul, verificați cu juristul companiei cum se documentează și se comunică grila înainte de aplicare.
Greșeli frecvente
- Testul pe o singură lună. Corectați: folosiți 3–6 luni, ca o lună atipică să nu regleze grila.
- Criteriile de „gata” scrise după rezultat. Corectați: fixați-le înainte de prima simulare.
- Mai multe schimbări deodată. Dacă schimbați ponderile și pragurile în același timp, nu mai știți ce a produs efectul. Corectați: o singură alegere pe rând.
- Ponderea nominală luată drept influență reală. Corectați: estimați ponderea efectivă și discutați diferența.
- Reglarea grilei până ies „oamenii buni” sus. Grila devine o confirmare a impresiilor, nu o măsurătoare. Corectați: schimbați grila doar pentru motive pe care le puteți scrie (o țintă greșită, o definiție inconsecventă).
- Datele lipsă ignorate în test. Corectați: numărați scorurile calculate din mai puține părți și rezolvați sursa înainte de lansare.
- Pilotul cu efect financiar. Corectați: pilotul nu decide bani; altfel oamenii negociază grila, nu o testează.
Cum faceți testul în Harmoniq
În Harmoniq, grila KPI se numește fișă de evaluare. Pe pagina fișei, cardul „Simulare” calculează fișa pe o perioadă închisă aleasă din listă, fără să salveze nimic. Rezultatul arată câți sunt evaluați, câți rămân fără scor, minimul, mediana, maximul, totalul bonusurilor, câte componente nu au avut date, histograma scorurilor și împărțirea pe niveluri.
- Încercați înainte de publicare. O ciornă se poate simula pe o perioadă trecută; până la publicare nu se calculează nimic pentru nimeni. Pentru sensibilitate, schimbați ponderile în ciornă („Importanță”) și rulați din nou simularea pe aceeași perioadă.
- Cazurile individuale. Simularea arată distribuția, nu lista pe persoane. Pentru o persoană anume, panoul „Încercați” din constructor arată rezultatul unei părți pe un exemplu real; pentru clasamente comparate, folosiți fișierul de mai jos.
- Versiuni. O fișă publicată este înghețată; o schimbare devine versiunea următoare, iar rezultatele deja calculate rămân legate de versiunea lor.
- După lansare, pagina „Scoruri” arată pentru fiecare perioadă închisă cum este împărțit grupul pe niveluri și câți au rămas fără date.
Construirea propriilor fișe și simularea sunt incluse în abonamentele Professional și Enterprise.
Fișierul de simulare
Fișierul simulare-ponderi-si-scoruri.xlsx conține exemplul de mai sus, cu formule. Completați valorile oamenilor în foaia „Date” și două seturi de ponderi în foaia „Ponderi”; foile „Simulare” și „Rezumat” calculează scorurile, nivelurile, locurile, schimbările de loc, distribuția și ponderea efectivă estimată. Celulele colorate sunt cele pe care le completați.
Întrebări frecvente
Câte luni de date trebuie pentru simularea unei grile KPI?
Folosiți cel puțin trei luni închise și, dacă activitatea este sezonieră, șase sau mai multe. O singură lună poate fi atipică: o campanie, o lipsă de stoc, un concediu lung. Pe mai multe luni vedeți dacă distribuția este stabilă și dacă aceleași persoane ies constant sus sau jos, ceea ce spune mai mult decât o fotografie a unei singure luni.
Ce fac dacă un indicator nu are istoric?
Simulați grila fără el și adăugați-l cu pondere zero în primele luni, doar pentru informare. După 2–3 luni de date reale vedeți cum variază valorile și abia atunci îi dați pondere. Alternativ, folosiți o țintă provizorie și spuneți explicit oamenilor că partea respectivă este în probă și nu influențează încă rezultatul.
Cât de mult se poate schimba clasamentul când modific ponderile?
Depinde de cât diferă oamenii între ei la fiecare indicator. În exemplul din articol, mutarea a 10 puncte de pondere schimbă locul a trei persoane și nivelul uneia. Dacă o schimbare mică mută mulți oameni de pe un nivel pe altul, scorurile sunt apropiate de praguri, iar grila trebuie comunicată cu prudență, mai ales când nivelul decide un bonus.
Ce este ponderea efectivă a unui indicator?
Ponderea efectivă arată cât contribuie un indicator la diferențele dintre scorurile oamenilor, nu doar cât scrie în grilă. Un indicator cu valori foarte împrăștiate are influență mare chiar cu pondere moderată, iar unul la care toți au valori apropiate contează puțin. Estimarea pondere × abatere standard ignoră corelațiile, deci servește ca semnal de verificare, nu ca valoare exactă.
Trebuie să arăt rezultatele simulării angajaților?
Nu este necesar să arătați scorurile individuale din simulare, pentru că nu au contat pentru nimeni. Este util să arătați grila finală, un exemplu complet de calcul și, eventual, distribuția anonimă pe niveluri. Pilotul, în schimb, se face cu scoruri arătate oamenilor, ca să aflați din timp ce nu înțeleg și ce contestă.
Cine ar trebui să participe la testarea grilei?
Participă cine construiește grila (de regulă HR sau controlul de gestiune), managerii care cunosc oamenii evaluați și cine deține sursele de date. Managerii verifică dacă distribuția este plauzibilă, iar responsabilii de date explică valorile ciudate. Persoanele evaluate nu trebuie să valideze grila, dar întrebările lor din pilot arată ce trebuie explicat mai bine.
Simularea garantează că grila este corectă?
Nu, simularea arată doar cum se comportă grila pe datele trecute. Nu poate spune dacă indicatorii aleși măsoară ce contează pentru funcție și nici cum își vor schimba oamenii comportamentul după ce află regulile. De aceea, după lansare, revizuiți grila după primele trei luni reale și urmăriți dacă apar efecte nedorite.
Ce faceți mai departe
Descărcați fișierul de simulare, înlocuiți datele fictive cu ultimele trei luni ale unei singure funcții și scrieți criteriile de lansare înainte să vă uitați la rezultat. Dacă scorul va decide bani, continuați cu articolul despre praguri, acceleratori și plafoane la bonusuri. Pentru comportamentele pe care o grilă le poate încuraja greșit, citiți KPI care încurajează comportamentul greșit. Ca să vedeți fișe de evaluare și scoruri pe date fictive, intrați în compania demo.