Per què la ciència del Big Five va sobreviure millor a la crisi de replicació
Els resultats que van fracassar a l'hora de replicar-se de manera més dramàtica en l'Open Science Collaboration estaven concentrats en la psicologia social i cognitiva: efectes llampants i contraintuïtius que feien bons titulars i bon material de classe. Els estudis de priming (la idea que exposar breument les persones a una paraula canvia el seu comportament posterior), l'esgotament de l'ego (la idea que la força de voluntat és un recurs que s'esgota amb l'ús) i diversos resultats clàssics d'influència social o bé no es van replicar, o bé es van replicar amb mides d'efecte que eren una fracció de les originals.
La ciència de la personalitat no era immune als problemes de replicació, però estava estructuralment més ben posicionada per resistir-los. Les raons són metodològiques.
Les mides de mostra tendeixen a ser més grans. Els resultats del Big Five que ancoren el camp —la relació entre Conscienciositat i rendiment laboral, entre Neuroticisme i benestar psicològic, entre Obertura i creativitat— es van establir al llarg de centenars d'estudis i meta-anàlisis amb desenes de milers de participants. Quan els resultats es basen en una N molt gran i s'han replicat moltes vegades en contextos diferents, la replicació és una qüestió de rutina més que no pas d'esperança.
Les mesures són més estables. Els qüestionaris de personalitat produeixen puntuacions altament fiables, amb fiabilitats de consistència interna situades habitualment en el rang de .80-.90. Els paradigmes de priming d'una sola sessió, en canvi, mesuren estats a curt termini i sensibles al context amb una fiabilitat molt inferior. Les mesures poc fiables impliquen efectes sorollosos que fluctuen de manera impredictible entre les replicacions.
Els constructes són més transparents operacionalment. La «Conscienciositat» té una definició clara i consensuada que s'ha operacionalitzat amb constància a través d'instruments i estudis durant dècades. Molts dels resultats de psicologia social que no es van replicar depenien d'operacionalitzacions creatives i teòricament discutides de constructes com ara el «poder», l'«actitud implícita» o l'«esgotament autoregulatori». Els constructes més transparents produeixen resultats més replicables. Els elements de domini públic de l'IPIP fan possible aquesta transparència en el pla de la mesura.
Els resultats robustos del Big Five que s'han replicat de manera fiable
«Entre els resultats més robustos de la psicologia de la personalitat hi ha la relació entre Conscienciositat i rendiment laboral: una connexió documentada al llarg de centenars d'estudis, múltiples cultures i una gran varietat de dominis ocupacionals.» — Roberts et al., 2007 (revisió meta-analítica)
Els resultats següents de la ciència de la personalitat han sobreviscut a la replicació repetida i a l'escrutini meta-analític amb mides d'efecte de moderades a grans de manera constant.
Conscienciositat i rendiment laboral. La meta-anàlisi de Barrick i Mount (1991) —i les seves moltes replicacions i extensions— va establir que la Conscienciositat (Disciplina en el marc de Cèrcol) és el predictor del Big Five més constant del rendiment laboral en tots els tipus ocupacionals. L'efecte no és gran en termes absoluts (correlacions corregides situades habitualment al voltant de .20-.28), però és dels més grans de la literatura sobre relacions entre personalitat i resultats, i es manté en diferents indústries, cultures i tipus de feina. Aquest resultat s'ha replicat tantes vegades que es tracta com un punt de referència amb el qual s'avaluen els nous predictors. Per a un perfil complet d'aquesta dimensió, mira què és la Conscienciositat.
Neuroticisme i benestar. La relació negativa entre Neuroticisme (Profunditat en la terminologia de Cèrcol) i el benestar subjectiu, la satisfacció vital i l'afecte positiu és un dels resultats més replicats de la ciència de la personalitat. Una meta-anàlisi de Steel, Schmidt i Shultz (2008) va trobar correlacions entre Neuroticisme i mesures de benestar global al voltant de -.40 a -.50. La relació es manté longitudinalment, transculturalment i a través de diverses operacionalitzacions del benestar. El panorama complet d'aquesta dimensió es tracta a què és el Neuroticisme.
Estabilitat dels trets al llarg de l'edat adulta. El resultat que els trets del Big Five són moderadament estables al llarg de l'edat adulta —i que es tornen més estables amb l'edat— s'ha replicat en estudis longitudinals de múltiples països. Roberts i DelVecchio (2000) van meta-analitzar 152 estudis longitudinals i van trobar que les correlacions test-retest augmentaven d'aproximadament .54 en la infància a .74 en l'edat adulta. La personalitat no és fixa, però no és tan mal·leable com de vegades suggereixen els relats populars. Aquest és un dels resultats més importants d'entendre abans de llegir cinc mites de la ciència de la personalitat que no volen morir.
Extraversió i afecte positiu. L'associació entre Extraversió (Presència) i l'emocionalitat positiva és altament replicable i apareix tant en estudis d'autoinforme com d'avaluació momentània ecològica. L'Extraversió sembla reflectir, en part, una sensibilitat biològica als senyals de recompensa que es manifesta com una tendència a experimentar emocions positives més freqüents i més intenses en contextos socials.
Obertura i creativitat, intel·ligència i implicació estètica. El vincle entre Obertura a l'experiència (Visió) i els resultats en dominis creatius —producció artística, pensament divergent, consum cultural— es replica de manera constant. La seva relació amb la intel·ligència cristal·litzada és moderada i robusta.
Quines afirmacions de la ciència de la personalitat tenen un historial de replicació més feble
No tots els resultats de la ciència de la personalitat han resistit la replicació igual de bé.
Interaccions específiques tret × resultat. Si bé els efectes principals dels trets del Big Five sobre resultats amplis són robustos, les afirmacions sobre interaccions moderadores específiques —que la Conscienciositat prediu el rendiment només en determinades condicions de lideratge, que l'Amabilitat importa més per al rendiment de l'equip en rols d'alta interdependència— tenen un historial de replicació més feble. Aquests efectes d'interacció sovint es basen en mostres més petites, impliquen més graus de llibertat dels investigadors en l'anàlisi i tendeixen a reduir-se substancialment en replicacions independents.
Intervencions de canvi de personalitat. Els estudis que afirmen que les intervencions dirigides poden modificar de manera significativa els nivells dels trets del Big Five —i que aquests canvis persisteixen al llarg del temps— han mostrat resultats de replicació mixtos. El resultat bàsic que la personalitat pot canviar és robust; l'evidència d'un canvi fiable, dirigit i durador a través d'intervencions específiques ho és menys. El camp necessita assajos preregistrats més grans abans no es justifiquin afirmacions fortes sobre el canvi de personalitat.
Interpretacions basades en tipus. Els intents de derivar «tipus» de personalitat significatius a partir de puntuacions contínues del Big Five —l'afirmació que hi ha grups diferenciats de persones amb perfils significativament diferents— han mostrat una replicació deficient. Un article àmpliament citat del 2018 de Gerlach et al. que afirmava identificar quatre tipus de personalitat robustos va ser ràpidament seguit d'anàlisis independents que mostraven que l'estructura de tipus era molt sensible a les decisions metodològiques. Les puntuacions contínues dels trets es repliquen; els tipus discrets, no. Aquesta és una de les raons per les quals Cèrcol evita el marc basat en tipus.
En què haurien de confiar els equips i què han de tractar amb precaució
| Resultat | Estat de replicació | Nivell de confiança |
|---|---|---|
| Conscienciositat → rendiment laboral | Altament replicat | Alt — usar-lo com a punt de referència |
| Neuroticisme → menor benestar | Altament replicat | Alt — constant en cultures i instruments |
| Estabilitat dels trets en l'edat adulta | Altament replicat | Alt — el canvi intrapersonal és real però lent |
| Extraversió → afecte positiu | Altament replicat | Alt — robust en mostreig d'experiència i en laboratori |
| Obertura → creativitat | Ben replicat | Moderat-alt — les mides d'efecte varien segons el domini |
| Interaccions específiques tret × resultat | Mixt | Baix — tractar-lo amb precaució; buscar evidència de N gran |
| Intervencions de canvi de personalitat | Mixt | Baix-moderat — prometedor però encara no establert |
| Tipus de personalitat a partir del Big Five | Poc replicat | Baix — evitar assignacions de tipus binàries |
La implicació pràctica per a qualsevol persona que utilitzi dades de personalitat és aplicar-les en el pla de les tendències àmplies dels trets, no de les prediccions de gra fi. La recerca sobre Conscienciositat i rendiment laboral et dóna base per esperar que algú amb puntuacions altes de Disciplina mostrarà, de mitjana i al llarg del temps, més fiabilitat i compliment que algú amb puntuacions baixes. No et dóna base per predir què farà en una situació específica, com respondrà davant un gestor concret o si tindrà èxit en un rol amb demandes inusuals. Per a un relat més complet d'aquests límits, mira què no pot predir la ciència de la personalitat.
Per a Cèrcol, això significa construir marcs interpretatius en el pla on l'evidència és més forta i ser explícits sobre la incertesa allà on l'evidència és més feble. La pàgina de ciència a cercol.team/science exposa la base d'evidència en detall.
Com el preregistre està millorant la credibilitat de la ciència de la personalitat
La crisi de replicació ha impulsat un canvi en les pràctiques d'investigació. El preregistre —comprometre's amb les hipòtesis, les mesures i l'estratègia analítica abans de la recollida de dades— impedeix la flexibilitat no divulgada que infla les taxes de falsos positius. Els estudis col·laboratius grans agreguen dades de molts laboratoris per produir estimacions de mida d'efecte prou robustes per generalitzar-les. Les col·laboracions adversarials enfronten investigadors amb visions oposades en estudis conjunts dissenyats per arbitrar-hi.
Aquestes pràctiques ja estan millorant la qualitat de la literatura de la ciència de la personalitat. Els resultats que sobreviuen a la replicació preregistrada amb una N gran són substancialment més creïbles que els resultats que només s'han demostrat en estudis d'un sol laboratori. A mesura que el camp maduri, la relació senyal-soroll millorarà, i amb ella la confiança que els professionals poden dipositar en les dades de personalitat. Per a una revisió de les concepcions errònies persistents, mira cinc mites de la ciència de la personalitat que no volen morir.
Posa a prova la ciència tu mateix amb Cèrcol
Els resultats del Big Five que s'han replicat de manera més robusta —Conscienciositat i rendiment, Neuroticisme i benestar, estabilitat dels trets— són exactament els resultats en els quals s'han de basar les avaluacions de personalitat. Aquest és l'estàndard que Cèrcol s'exigeix a si mateix: només s'utilitzen les dimensions i les relacions amb historials de replicació forts per generar percepcions, i la pàgina de ciència documenta l'evidència de suport de manera transparent.
Si vols veure com és la ciència de la personalitat replicada a la pràctica, Cèrcol és gratuït a cercol.team. L'avaluació utilitza elements de domini públic de l'IPIP, puntua les cinc dimensions l'evidència de validesa de les quals va sobreviure a la crisi de replicació i et dóna perspectives tant d'autoinforme com de companys, perquè dos senyals independents són més fiables que un de sol.
Lectura addicional: Crítiques del Big Five: què diuen els crítics · La ciència que hi ha darrere de Cèrcol
Lectura addicional
- Crítiques del Big Five: què diuen els crítics
- Cinc mites de la ciència de la personalitat que no volen morir
- Què són la fiabilitat i la validesa en els tests de personalitat
- Límits de la ciència de la personalitat: què no pot predir
- Història del Big Five: d'Allport a Goldberg
- La ciència de la personalitat i els RH basats en l'evidència: per què importa