17:17
Comentarii Adauga Comentariu

_ Opinie: Evaluarea de la colegi nu este perfectă — îi învăț pe alții cum să o facă și am văzut direct cum este scurt

_ Opinie: evaluarea de la colegi nu este perfectă — Îi învăț pe alții cum să facă acest lucru și am văzut direct cum este scurt

Când predau metode de cercetare, o atenție majoră este evaluarea colegilor. Ca proces, evaluarea inter pares evaluează lucrările academice pentru calitatea, integritatea și impactul lor asupra unui domeniu, modelând în mare măsură ceea ce oamenii de știință acceptă drept „cunoaștere”. Din instinct, orice universitar urmărește o idee nouă cu întrebarea „A fost acea revizuire de către colegii?”

Deși cred în importanța evaluării de către colegi – și ajut la evaluările de la colegi pentru mai multe reviste academice –, știi cât de vulnerabil poate fi procesul. Nu numai că cadrele universitare au pus sub semnul întrebării fiabilitatea evaluării inter pares de zeci de ani, dar retragerea a peste 10.000 de lucrări de cercetare în 2023 a stabilit un nou record.

Prima mea întâlnire cu defectele procesului de evaluare inter pares în 2015, în primul meu an de doctorat. student la psihologie educațională la o mare universitate din nord-vestul Pacificului.

Consilierul meu a publicat unele dintre cele mai citate studii în cercetarea educațională. A făcut parte din mai multe comitete editoriale. Unele dintre cele mai recunoscute reviste în domeniul învățării științei i-au solicitat revizuirea noilor studii. Într-o zi, am bătut la ușa biroului lui. Mi-a răspuns fără să se ridice de pe scaun, un manuscris tipărit i s-a deschis pe poală și mi-a făcut semn să intru.

„Program bun”, a spus el. „Aveți experiență în evaluarea inter pares?”

Am făcut parte din personalul editorial pentru reviste literare și am revizuit articole de poezie și ficțiune, dar mă îndoiam că o mare parte din aceasta a fost transferată în evaluarea științifică.

„Fantastic”. El zâmbi uşurat. „Aceasta va fi o învățare în lumea reală”. Mi-a întins manuscrisul din poală și mi-a spus să-i primesc recenzia scrisă înapoi într-o săptămână.

Eram prea stânjenită să întreb cum se face de fapt evaluarea de la colegi, așa că i-am oferit un plan improvizat bazat pe pe baza experienței mele anterioare: „Voi face comentarii de editare în margine și apoi voi scrie un rezumat despre calitatea generală?”

Zâmbetul i s-a stins, fie din cauza dezamăgirii, fie din cauza distragerii atenției. A început să răspundă la un e-mail.

„Asigurați-vă că metodele sunt corecte. Rezultatele au sens. Nu vă faceți griji pentru editare.”

În cele din urmă, mi-am croit drumul. , economisindu-i timp consilierului meu pentru o analiză mai puțin pe care trebuia să o efectueze. După aceea, am primit feedback bun și, în cele din urmă, am devenit un evaluator încrezător. Dar la acea vreme, cu siguranță nu eram un „peer”. Eram prea nou în domeniul meu pentru a evalua metodele și rezultatele și nu fusesem încă expus la suficiente studii pentru a identifica o observație surprinzătoare sau pentru a recunoaște calitatea pe care trebuia să o controlez. Datele manipulate sau metodele necorespunzătoare ar fi putut rămâne cu ușurință nedetectate.

Cunoașterea nu este evidentă de la sine. Un sondaj poate fi conceput cu o cantitate problematică de părtinire, chiar dacă neintenționată.

Observarea unui fenomen într-un context, cum ar fi o intervenție care îi ajută pe copiii albi din clasa de mijloc să învețe să citească, poate să nu ofere neapărat perspective pentru cum să înveți cel mai bine cititul copiilor din alte categorii demografice. Dezbaterile despre „știința lecturii” în general au durat zeci de ani, cercetătorii s-au certat cu privire la „recomandările” în continuă schimbare, cum ar fi dacă să predea fonetica sau utilizarea indicii de context.

O corelație – un student care agresează alți studenți și joacă jocuri video violente – poate să nu fie cauzalitate. Nu știm dacă elevul a devenit un bătăuș din cauza jocurilor video violente. Doar experții dintr-un domeniu ar putea observa astfel de diferențe și, chiar și atunci, experții nu sunt întotdeauna de acord cu ceea ce observă.

Ca indivizi, de foarte multe ori putem fi limitați de propriile noastre experiențe. Să spunem că în viața mea văd doar lebede albe. S-ar putea să-mi formez cunoștințele că există doar lebedele albe. Poate scriu un manuscris despre viața mea de observații, ajungând la concluzia că toate lebedele sunt albe. Trimit acel manuscris unui jurnal și un „colegi”, cineva care a observat și o mulțime de lebede, spune: „Stai puțin, am văzut lebede negre”. Acel colegi mi-ar comunica înapoi observațiile lor, astfel încât să îmi pot perfecționa cunoștințele.

Colegiul joacă un rol esențial în evaluarea observațiilor, cu scopul general de a avansa cunoștințele. De exemplu, dacă scenariul de mai sus s-ar inversa, iar evaluatorii colegi care credeau că toate lebedele sunt albe au dat peste primul studiu care a observat o lebădă neagră, studiul ar primi multă atenție, pe măsură ce cercetătorii s-au străduit să reproducă această observație. Deci, de ce un student absolvent din primul an a ajuns să înlocuiască un expert? De ce recenzia mea ar conta la fel ca recenzia unui veteran? Un singur răspuns: procesul se bazează aproape în întregime pe forța de muncă neremunerată.

În ciuda faptului că colegii sunt profesioniști, evaluarea inter pares nu este o profesie.

Ca urmare, aceiași savanți suprasolicitați adesea primesc cea mai mare parte a cererilor de evaluare inter pares. Pe lângă inechitatea în muncă, un grup mic de experți poate duce la un proces restrâns a ceea ce poate fi publicat sau a ceea ce contează drept cunoștințe, amenințând direct diversitatea de perspective și de savanți.

Fără un grup de recenzenți suficient de mare, procesul pot cădea cu ușurință victimele politicii, care decurg dintr-o comunitate mică care își recunoaște munca reciprocă și compromite conflictele de interese. Multe dintre problemele legate de evaluarea inter pares pot fi abordate prin profesionalizarea domeniului, fie prin recunoaștere oficială, fie prin compensare.

În ciuda acestor provocări, încă le spun studenților mei că evaluarea inter pares oferă cea mai bună metodă de evaluare a studiilor și de avansare. cunoştinţe. Luați în considerare fenomenul statistic care sugerează că grupurile de oameni au mai multe șanse să ajungă la „răspunsuri corecte” decât indivizii.

În cartea sa „The Wisdom of Crowds”, autorul James Surowiecki spune povestea unui târg de județ din 1906, unde târgurile au ghicit greutatea unui bou. Sir Francis Galton a făcut media celor 787 de ipoteze și a ajuns la 1.197 de lire sterline. Bouul cântărea 1.198 de lire sterline.

Când vine vorba de știință și reproducerea ideilor, înțelepciunea celor mulți poate explica valorile aberante individuale. Din fericire, și în mod ironic, așa a discreditat știința interpretarea lui Galton asupra eugeniei, care a eclipsat contribuțiile sale la știință.

Ca proces, evaluarea inter pares funcționează teoretic. Întrebarea este dacă peer-ul va primi sprijinul necesar pentru a efectua în mod eficient evaluarea.

Acest articol este republicat din The Conversation sub o licență Creative Commons. Citiți articolul original.


(Fluierul)


Linkul direct catre Petitie

CEREM NATIONALIZAREA TUTUROR RESURSELOR NATURALE ALE ROMANIEI ! - Initiativa Legislativa care are nevoie de 500.000 de semnaturi - Semneaza si tu !

Comentarii:


Adauga Comentariu



Citiți și cele mai căutate articole de pe Fluierul:

_ Triunghiul Weimar intervine puternic în Ucraina! Apelul lui Zelenski: 'Este de o importanţă critică!'

_ Experții spun că realinierea politică americană este reală � democrații �și pierd sprijinul pentru alegătorii minorităților

_ Comisia Europeană contestă cifrele șefei EPPO, Laura Codruţa Kövesi: 'Ar trebui să fie mulţumiţi că am trimis acea scrisoare!'

_ Drulă: Ciolacu a pus premiu pe capul primarilor USR

_ STENOGRAME care aruncă în aer PMP: cine se află în spatele lui Cristian Diaconescu/ VIDEO

_ Rebecca Grossman este acuzată că a conspirat cu soțul și fiica ei în apeluri la închisoare pentru a „vâna jurați, influența judecătorul și cere fostului ei star retras din MLB să spună că EL a ucis doi frați într-un accident groaznic de lovire și fugă”

_ Cereale pentru țărani? Cum folosesc elitele „Skimpflația” pentru a ne controla obiceiurile alimentare

_ Sărbătorile zilei din 19 martie - Sf. Mc. Hrisant şi Daria, Claudiu şi Ilaria; Sf. Mc. Marian Diaconul

_ Ziua Yen’s Whiplash începe doar cu o creștere a ratelor

_ Serbia pregătește o nouă strategie de dezvoltare a energiei: se va concentra pe lansarea pe piața hidrogenului

_ 'Nașul inteligenței artificiale' face o previziune oribilă: aceasta ar putea în cele din urmă să depășească inteligența umană și să preia controlul

_ Bulgaria ar putea juca un rol important în coridorul de energie verde Azerbaidjan-UE

_ Începând cu 2025, oamenii vor putea să ia masa în spațiu: sumă șocantă ce trebuie să scoasă din buzunar pentru o gustare

_ Raportul critică „Erorile catastrofale” ale blocajelor COVID, avertizează asupra repetării

_ Horoscopul săptămânii 18 martie – 24 martie 2024

_ Horoscopul zilei de 20 martie 2024. Berbecii sunt sfătuiți să aibă grijă de sufletul lor

_ Recep Erdogan, discurs războinic: Să ne încheiem lucrarea neterminată din Siria/ Turcia va construi un nou portavion

_ Recordurile din toate timpurile privind cererea duc la creșterea prețurilor petrolului

_ Bank Of Japan (în sfârșit) a ucide ultima rată negativă a dobânzii din lume, yenul slăbește

_ Trump îi spune lui Ramaswamy „Nu” pentru vicepreședinte, dar lasă ușa cabinetului deschisă

_ NIMIC nu va reduce la tăcere conspirația Kate? În timp ce Prințesa de Wales este fotografiată zâmbind la magazinul de la fermă, cinicii apelează la rețelele de socializare pentru a spune că este un corp dublu, AI sau chiar o femeie total diferită.

_ Guvernul ar putea respinge amendamentele lorzilor la proiectul de lege din Rwanda, ridicând speranțele lui Sunak de a avea primul zbor în primăvară - dar laburiștii se vor opune planurilor la un vot crucial de mâine

_ Joe Biden l-a avertizat Benjamin Netanyahu - Urmează negocieri la Washington

_ Joe Rogan smulge acuzațiile lui Trump din �Banana Republic�: �Se pare că �ncerci să-ți judeci oponenții politici� (VIDEO)

_ JD Sports a criticat după ce a postat o reclamă „de necrezut” care arată motocicliști purtând antrenori despre care experții spun că sunt nepotriviți pentru a conduce o motocicletă

_ Charles Michel avertizează: Dacă vrem pace, Europa trebuie să se pregătească pentru război

_ Owen Franks va rata meciurile cheie ale Crusaders după două meciuri de suspendare

_ Explicația a patra a reducerii la jumătate a Bitcoin

_ JD Sports a criticat după ce a postat o reclamă „iresponsabilă” care arată motocicliștii purtând antrenori despre care experții spun că sunt nepotriviți pentru a conduce o motocicletă

_ Bank of Japan pune capăt ratelor negative ale dobânzilor, optând pentru prima majorare în 17 ani

_ Accident grav în județul Dâmbovița: Mașină izbită de un stâlp, patru răniți între care două victime încarcerate

_ Șoferii Jaguar I-Pace nu mai pot încărca cu tarif ieftin Octopus Energy din cauza schimbării software-ului

_ Andy Cohen îi aduce un omagiu emoționant Natasha Richardson, când acesta marchează cea de-a 15-a aniversare de la moartea ei tragică la vârsta de 45 de ani într-un accident de schi: „Ea a fost perfect minunată”

_ Pieţele europene vor deschide în scădere, investitorii aşteptând şedinţa Fed

_ Soțul bătut, care a fost abuzat de soția sa timp de 20 de ani, își găsește o nouă dragoste: designerul IT dezvăluie că se află într-o nouă relație după ce soția care l-a chinuit a fost închisă pentru campanie de cruzime

_ Turist găsit mort de o curățenie la un hotel de apartamente într-un popular loc de vacanță care atrage un număr mare de turiști britanici

_ Chirurgul irakian, în vârstă de 63 de ani, care a fost hărțuit rasial după ce a fluierat pe colegii albi și indieni „de neatins” în legătură cu moartea a 25 de pacienți la spitalul de încredere, primește despăgubiri cu 430.000 de lire sterline.

_ Tensiuni pe axa Moscova – Berlin: Rusia a cerut ca Germania să recunoască oficial 'asediul Leningradului ca un act de genocid'

_ Sophie Turner „reactivează” procedurile de divorț de la Joe Jonas după ce acestea nu reușesc să ajungă la o înțelegere - deoarece judecătorul va decide cine primește custodia copiilor lor

_ Fosta vedetă K-pop părăsește închisoarea după cinci ani de viol, pedeapsă cu camera spion

_ Specialiștii ANM anunță o vreme ciudată în România: vom avea parte și de ploi însemnate cantitativ

_ Cât de bogat este medicul cu care PSD și PNL vor să câștige Primăria Capitalei? Are nu mai puțin de 25 de conturi bancare

_ Nvidia a lansat un cip AI care face unele sarcini de 30 de ori mai rapid decât predecesorul său

_ Mi-am renunțat la slujba mea de doamnă acadea după ce am fost scuipată de părinți: Mama dezvăluie cum s-a simțit forțată să demisioneze pentru că nu se mai simte în siguranță în preajma șoferilor nerăbdători care refuză să încetinească la școală

_ Trei ferestre de transfer. 43 de jucători au semnat. 300 de milioane de lire sterline aruncate. Cum Nottingham Forest a pierdut complotul

_ Fosta gazdă MSNBC Keith Olbermann stârnește furie pe X, spunând că există „întotdeauna speranța” că Trump va fi asasinat

_ Iubitul Arynei Sabalenka, fostul jucător de hochei Konstantin Koltsov, ucis la Miami - presă

_ Ședință cu scântei la Guvern: Gabriela Firea este față în față cu Marcel Ciolacu (Surse)

_ Coreea de Nord înarmează masiv Rusia - Mii de containere cu armament pentru războiul din Ucraina

_ Ion Ţiriac, dat de gol! Gestul şocant al magnatului. Un apropiat a spus adevărul fostul mare jucător

_ Fiul, 27 de ani, este acuzat că a încercat să-și înjunghie părinții până la moarte la casa lor de 700.000 de lire sterline.

_ Ar fi putut fi regina! Dar această respectată soție a fermierului ar fi mai degrabă „căsătorit cu un praf” decât cu cineva pe care nu o iubea. Așa că, în schimb, a jucat rolul lui Cupidon pentru Charles și Diana

_ Moștenirea mea se bea printr-un pai într-o nucă de cocos în Caraibe! Sunt egoist pentru că i-am supărat pe părinții mei boomer pentru că ar arde banii care ar trebui să fie ai mei?

_ Ion Cristoiu: Candidatura lui Piedone la Primăria Capitalei e justificarea scoaterii din joc a Gabrielei Firea. Cătălin Cârstoiu e candidatul coaliţiei de acum o lună şi are avantaje uriaşe

_ Războiul din Ucraina, ziua 755. Armata ucraineană îşi întăreşte fortificaţiile în regiumea Sumî / Cehia încearcă să livreze obuze Kievului "cât mai repede posibil"

_ Pedofilul adorator al diavolului, în vârstă de 76 de ani, care l-a înjunghiat până la moarte pe școlar în fața mulțimii din Covent Garden, după ce autoritățile nu au reușit să-l închidă pentru urmărire, ar putea fi eliberat în doar câteva luni

_ Nvidia a dezvăluit un cip care face unele sarcini de 30 de ori mai rapid decât predecesorul său

_ Bursă. BRK Financial Group menţine recomandarea de cumpărare pentru acţiunile Purcari

_ Trump sugerează că l-ar putea DEPORTA prințul Harry din SUA dacă câștigă alegerile și spune că ducele nu va primi „privilegii speciale” dacă și-ar minți cu viză despre consumul de cocaină, iarbă și ciuperci.

_ Anul ăsta, primăvara vine într-o miercuri


Pag.1 Pag.2 Pag.3 Pag.4 Pag.5 Pag.6 Pag.7
Pag.8

Nr. de articole la aceasta sectiune: 475, afisate in 8 pagini.