GRE: Fysikere siger Grad School Entrance Exam er en dårlig forudsigelse for succes

For de fleste kandidatstuderende starter vejen til en avanceret grad i et lille lysløst rum foran en computerskærm og tager endnu en runde standardiserede tests. Da de frantisk skriver et essay, der er bestemt til at blive graderet af en computer, kan de måske undre sig: "Hvordan hjælper dette mig med at komme igennem gradskolen?" En undersøgelse udgivet onsdag i Videnskabelige fremskridt er her for at validere deres indre angst. GRE er ikke kun en dårlig måde at bestemme grad skole succes på; det kan også gøre mere skade end godt.

Ledet af Casey Miller, Ph.D., en eksperimentel fysiker ved Rochester Institute of Technology, fokuserer denne undersøgelse specifikt på fysik graduate programmer, selvom Miller mener, at hans resultater sandsynligvis vil gælde for en række felter. Da han analyserede anonyme GRE-scoringer fra 27 universitetsstuderende programmer rundt om i landet, fandt han, at de undlod at forudsige, om de rent faktisk sluttede med deres grad i slutningen af ​​dagen.

Dette er allerede velkendt blandt fysikere, siger han, men hans undersøgelse tilføjer hårde data for at vise, at både den generelle GRE-test og den fysik-specifikke test er ikke en sikker brand måde at fortælle, hvem der ville lave en stor fysiker.

"Fysikere er en flot flok. De ændrer ikke typisk, hvordan de gør ting uden data, "fortæller han Inverse. "Så det faktum, at vi kan sætte data til dette specifikt i fysiksamfundet, hjælper fakultetet med at se disse værktøjers nytteværdi. Så de vil forhåbentlig se, at testene ikke forudsiger Ph.D. færdiggørelse eller karakterer meget godt."

Første gang jeg tog GRE Adv Physics testen, scorede jeg 7th percentile. 2. gang jeg fik 11. Jeg har siden lavet min ph.d. i røntgenfysik, arbejdet hos NIST og NASA, og jeg er stolt af at have løst betydelige tekniske udfordringer i design og test af James Webb Space Telescope.

- Scott Rohrbach (@scottrohrbach) 30. april 2018

Ting GRE kan ikke forudsige

I undersøgelsen analyserede Miller resultater fra tre forskellige GRE-testafsnit: GRE-V (verbal), GRE-Q (matematik) og GRE-P (den fysikspecifikke fagtest). Han sammenlignede disse scores med færdiggørelsesgraden og karaktererne af studerende i fysik Ph.D. programmer i fire overlappende grupper: studerende fra USA, studerende fra udlandet, kvindelige studerende fra USA og mandlige studerende fra USA. På tværs af alle fire grupper, GRE-P * undladt at forudsige om eleverne ville afslutte deres program, ligesom GRE-V sektionen.

Der var et lille glimt af håb om GREs matematikafdeling, der viste en vis sammenhæng med færdighedsfrekvensen, da resultaterne fra amerikanske kvindelige studerende og amerikanske mandlige studerende blev kombineret. Det var dog ikke en god forudsigelse, når den blev anvendt til studerende som helhed og udelukkende studerende uden for USA.

Ikke desto mindre ser tingene ikke særlig godt ud for GRE i dette papir - især den fysik-specifikke GRE. Studerende, der scorede under 50-percentilen havde tilsvarende grad af færdiggørelse til dem, der scorer i de øverste procentiler, påpeger Miller. Det tilføjer han, er en vigtig observation, fordi en række fysik Ph.D programmer har hårde cutoffs. Omkring 25 procent af fysikprogrammerne annoncerer, at en GRE-score burde være over 55. percentilen, for at en ansøger kan få et skud ved optagelse.

Ting GRE Kan Forudsige

Kort sagt, GRE scorer undlader at forudsige, hvor god en fysiker en person kan vise sig at være. I stedet afspejler de demografiske mønstre (http://www.nature.com/naturejobs/science/articles/10.1038/nj7504-303a), der er lige så ubrugelige til at forudsige en persons succes på kandidatskolen. Der er ingen statistisk signifikant sammenhæng mellem køn og en persons sandsynlighed for at afslutte en ph.d. i fysik, siger Miller, men der er et betydeligt kønsforskel på GRE-P score: Median score for en kvinde i USA er 580 og median score for en mand i USA er 680. Implikationen er, at begge grupper ville have en lignende chance for at udmærke sig ved coursework kræves for at blive fysiker, men går ved deres testresultater, står man et bedre skud ved optagelse end den anden.

Det er vigtigt, at ingen af ​​disse resultater sandsynligvis endda er gode nok til at få hver ansøger til en anslået 25 procent af programmerne - selvom Miller kunne vise betydelige huller efter køn, race og etnicitet i hvem der når den score, og hvem der ikke. Og det tager ikke engang hensyn til indkomst mønstre forbundet med GRE test scores.

Den store takeaway, siger MIller, er, at GRE ikke fortæller indlæggelsesudvalg noget om, hvad der gør en god fysiker - og kunne være delvist ansvarlig for fysikens uhyre mangfoldighedsstatistik. Kun 5 procent af fysik Ph.D. grader tildelt årligt gå til underrepræsenterede mindretalsgrupper, og kun 20 procent af gå til kvinder. Miller's resultater tyder på, at der er mange mennesker i begge disse grupper, hvis testresultater sætter dem solidt i den afviste bunke, før de selv har mulighed for at prøve deres styrke.

"Vi er rimeligt gode til at vælge, hvem der har det godt i kursusarbejde, men selvfølgelig er de færdigheder, der kræves for at blive succesfulde i kurser, ikke de samme færdigheder, der er vigtige for at være en vellykket forskningsfysiker," siger Miller. "Fremadrettet, vi forsøger at fokusere på de ting, vi ved, gør en god forsker, som det nuværende system ikke gør meget godt."