A ChatGPT kettős: Hogyan változtatta meg az AI chatbot a tudósok életét

A ChatGPT kettős: Hogyan változtatta meg az AI chatbot a tudósok életét

Az azóta eltelt két évben ChatGPT megosztása a nyilvánosság felé, a kutatók arra használják, hogy közöljék saját tudományos szövegek javítása, tekintse át a tudományos irodalmat és Írjon kódot az adatok elemzéséhez. Míg egyesek úgy vélik, hogy a chatbot, amely 2022. november 30-án vált népszerűvé, növeli a tudósok termelékenységét, mások attól tartanak, hogy ő A plágium könnyebbé vált, pontatlanságokat vezet be a kutatási cikkekben és nagy mennyiségű energiát fogyaszt.

A New Jersey-i hoboken-i Wiley kiadó 1043 kutatót kérdezett meg márciusban és áprilisban az olyan generatív mesterséges intelligencia-eszközök használatáról, mint a ChatGPT, és megosztotta az előzetes eredményeket a Nature-vel. A válaszadók 80 százaléka számolt be arról, hogy személyesen vagy szakmailag használja a ChatGPT-t, így ez a legszélesebb körben használt eszköz az akadémikusok körében. A válaszadók háromnegyede úgy vélte, hogy a következő 5 évben fontos lesz, hogy a kutatók mesterséges intelligencia-képességeket fejlesszenek ki munkájuk elvégzéséhez.

„A mesterséges intelligencia szövegszerkesztői már korábban is léteztek, de ezeknek a nagyon erős, nagy nyelvi modelleknek a megjelenése jelentős változás következett be” – magyarázza James Zou, a kaliforniai Stanford Egyetem mesterséges intelligencia-kutatója. A San Francisco-i OpenAI technológiai cég által kifejlesztett ChatGPT chatbot volt a katalizátor a változásban.

A ChatGPT második születésnapja alkalmából a Nature használati adatokat gyűjtött össze, és beszélt tudósokkal arról, hogyan változtatta meg a ChatGPT a kutatási környezetet.

ChatGPT számokban

• 60.000: Die Mindestanzahl an wissenschaftlichen Arbeiten, die 2023 veröffentlicht wurden und voraussichtlich mit Hilfe eines großen Sprachmodells (LLM) verfasst wurden 1. Dies entspricht etwas mehr als 1 % aller Artikel in der von dem Forschungsteam untersuchten Dimensions-Datenbank akademischer Veröffentlichungen.
• 10 %: Der Mindestanteil der Forschungspapiere, die von Mitgliedern der biomedizinischen Gemeinschaft in der ersten Jahreshälfte 2024 veröffentlicht wurden und voraussichtlich ihre Abstracts mit Unterstützung eines LLM verfasst haben 2. Eine andere Studie schätzte diesen Anteil für die Informatikgemeinde im Februar sogar auf höhere 17.5 % 3.
• 6.5–16.9 %: Der geschätzte Anteil der Peer-Reviews, die 2023 und 2024 an einer Auswahl von Top-AI-Konferenzen eingereicht wurden und vermutlich erheblich von LLMs generiert wurden 4. Diese Bewertungen beurteilen Forschungspapiere oder Präsentationen, die für die Konferenzen vorgeschlagen werden.

Író asszisztens

Mindezek a számok, amelyeket az LLM-ekre jellemző szövegek mintáinak és kulcsszavainak értékelésével határoztak meg, valószínűleg óvatos becslések – mondja Debora Weber-Wulff, a HTW Berlin informatikusa és plágiumkutatója. Munkájuk azt mutatja, hogy az észlelési eszközök gyakran kudarcot vallanak, amikor annak megállapítására kerül sor, hogy a dolgozatot mesterséges intelligencia segítségével írták-e 5.

Az elmúlt két évben a kutatók arra a következtetésre jutottak, hogy a ChatGPT segítségével absztraktokat, valamint pályázatokat és támogatási leveleket készítenek a diákok számára, lehetővé téve számukra, hogy összetett feladatokra összpontosítsanak. „A kemény kérdések és a kreatív hipotézisek megérik az időnket” – mondja Milton Pividori, a Colorado Egyetem Orvostudományi Karának orvosi informatikusa.

A kutatók jelentése szerint az LLM-ek különösen hasznosak a nyelvi akadályok leküzdésében. „Demokratizálja az írást, és segít azoknak, akiknek az angol a második nyelv” – magyarázza Gabe Gomes, a pennsylvaniai Pittsburgh-i Carnegie Mellon Egyetem vegyésze. Az SSRN nyomtatás előtti szerveren, a szakértői értékelés előtt novemberben közzétett elemzés megállapította, hogy a nem angol anyanyelvű szerzők írásának minősége javult a ChatGPT megjelenése után, jobban, mint az angolul folyékonyan beszélő szerzők írásának minősége. 6.

2022-es megjelenése óta a ChatGPT számos frissítésen esett át. GPT-4, 2023 márciusában jelent meg, lenyűgözte a felhasználókat azzal, hogy képes emberszerű szövegeket generálni. A legújabb modell, az o1 amelyet szeptemberben jelentettek be Néhány fizető vásárló, valamint bizonyos tesztelési fejlesztők számára elérhető, az OpenAI szerint „komplex feladatokat elemezhet és nehezebb problémákat oldhat meg, mint a tudomány, a programozás és a matematika korábbi modelljei”. Kyle Kabasares, a kaliforniai Moffett Fieldben található Bay Area Environmental Research Institute adattudósa az o1-et használta hogy reprodukáljon valami kódot a doktori projektjéből. Amikor beírta a kutatási cikkének módszerek részében szereplő információkat, az AI-rendszer mindössze egy óra alatt olyan kódot írt, amelynek létrehozásához közel egy évbe telt a posztgraduális tanulmányaiból.

Korlátozások és lehetőségek

Pividori szerint az egyik terület, ahol a ChatGPT és a hasonló mesterséges intelligencia rendszerek kevésbé voltak sikeresek, az irodalmi áttekintések készítése. „Nem igazán segítenek abban, hogy produktívabbak legyünk” – magyarázza, mert a kutatónak el kell olvasnia és teljes egészében meg kell értenie a vonatkozó cikkeket. "Ha a tanulmány nem központi szerepet játszik a kutatásban, akkor AI-eszközöket használhat az összefoglaláshoz" - teszi hozzá. De az LLM-ekről kimutatták, hogy hallucinálnak 7 – vagyis információt alkotnak. Például beszélhetnének olyan számokról, amelyek nem is léteznek egy cikkben.

A kutatók másik gondja az LLM-ek használatakor az adatvédelem. Például amikor a tudósok publikálatlan eredeti adatokat visznek be az egyik ilyen mesterséges intelligencia-eszközbe, hogy dolgozzanak, fennáll a veszélye annak, hogy a tartalmat e modellek frissített verzióinak betanítására használják fel. „Ezek fekete dobozok” – magyarázza Weber-Wulff. "Fogalmad sincs, mi történik az oda feltöltött adatokkal."

E kockázat elkerülése érdekében egyes kutatók kisebb, helyi modelleket választanak a ChatGPT helyett. „A számítógépen futtatja, és semmi sem kerül megosztásra kívülről” – mondja Pividori. Hozzáteszi, hogy bizonyos ChatGPT-előfizetési tervek biztosítják, hogy az Ön adatait ne használják fel a modell betanításához.

Nagy kérdés, amelyet a kutatók kerestek az elmúlt évben, hogy a ChatGPT túllép-e a virtuális asszisztens szerepén és egy AI tudós lehet. Néhány korai erőfeszítés arra utal, hogy ez lehetséges. Zou egy olyan virtuális labor fejlesztését vezeti, amelyben különböző LLM-ek vállalják a tudósok szerepét egy interdiszciplináris csapatban, miközben egy humán tudós magas szintű visszajelzést ad. „Együtt dolgoznak új kutatási projektek kidolgozásán” – mondja. Múlt hónapban Zou és kollégái közzétették az egyik ilyen projekt eredményét a bioRxiv nyomtatás előtti szerveren a szakértői értékelés előtt. 8. A virtuális labor nanotesteket – egyfajta kisméretű antitestet – tervezett, amely képes kötődni a COVID-19 világjárványt okozó SARS-CoV-2 koronavírus variánsaihoz. Emberkutatók kísérletekkel validálták a munkát, és két ígéretes jelöltet azonosítottak további tanulmányozásra.

Gomes és kollégái szintén izgatottak a ChatGPT laboratóriumi használatának lehetőségétől. Ő használja az eszközt több kémiai reakció végrehajtására egy általuk tavaly év végén bevezetett robotrendszer segítségével. „Az elvárás az, hogy ezek a modellek képesek legyenek új tudomány felfedezésére” – mondja Gomes.

1. Gray, A. Preprint on arXiv https://doi.org/10.48550/arXiv.2403.16887 (2024).

2. Kobak, D., González-Márquez, R., Horvát, E.-Á. & Lause, J. Preprint on arXiv https://doi.org/10.48550/arXiv.2406.07016 (2024).

3. Liang, W. et al. Előnyomtatás az arXiv-en https://doi.org/10.48550/arXiv.2404.01268 (2024).

4. Liang, W. et al. Előnyomtatás az arXiv-en https://doi.org/10.48550/arXiv.2403.07183 (2024).

5. Weber-Wulff, D. et al. Int. J. Educ. Integr. 19, 26 (2023).

   Cikk
   PubMed
   
   Google Tudós

6. Liang, Y., Yang, T. & Zhu, F. Preprint on SSRN https://doi.org/10.2139/ssrn.4992755 (2024).

7. Farquhar, S. et al. Nature 630, 625–630 (2024).

   Cikk
   PubMed
   
   Google Tudós

8. Swanson, K., Wu, W., Bulaong, N. L., Pak, J. E. & Zou, J. Preprint on bioRxiv https://doi.org/10.1101/2024.11.11.623004 (2024).

Referenciák letöltése