Meta’s Galactica AI kerfi er hannað til að leysa vandamálið með ofhleðslu upplýsinga í vísindum
Meta Galactica AI
Móðurfyrirtæki Facebook, Meta, hefur gefið út gervigreind líkan sem kallast Galactica sem er hannað til að skrifa ritgerðir eða vísindagreinar sem draga saman stöðu mála um tiltekið efni, ásamt tilvitnunum, sem og ítarlegar Wikipedia greinar. Það getur einnig framkvæmt stærðfræðilega útreikninga og svarað spurningum um tilteknar sameindir.
Til hvers er Galactica?
Meta svaraði ekki beiðni um viðtal, en blaðið um Galactica segir að tólinu sé ætlað að draga saman vísindalegar upplýsingar heimsins á aðgengilegan hátt. „Sprengilegur vöxtur í vísindaritum og gögnum hefur gert það sífellt erfiðara að uppgötva gagnlega innsýn í miklum fjölda upplýsinga,“ segir þar.
Galactica er ætlað að vera stórt gervigreindarlíkan sem getur „geymt, sameinað og rökstutt vísindalega þekkingu“.
„Þetta tól er að skrifa á pappír eins og akstursaðstoð er við akstur,“ sagði Yann LeCun, yfirmaður gervigreindarfræðings Meta, á Twitter . „Það mun ekki skrifa blöð sjálfkrafa fyrir þig, en það mun draga verulega úr vitrænni álagi á meðan þú skrifar þau.
Hvernig virkar það?
Galactica er röð gervigreindarlíkana sem þjálfaðar eru á meira en 48 milljónum „hágæða og mjög söfnuðum“ vísindaritum, kennslubókum og fyrirlestrum, vísindavefsíðum og alfræðiorðabókum, segir í Meta blaðinu.
Vísindamenn þjálfuðu fimm mismunandi gervigreindarlíkön á þessum upplýsingum, með vaxandi stærð og flókið, allt frá tiltölulega hóflegum 125 milljónum.
Hversu vel gengur það?
Meta vísindamenn prófuðu Galactica gegn öðrum gervigreindum gerðum á ýmsum viðmiðum. Á BIG-bekk prófinu, sem er safn af
Galactica stóð sig einnig vel á öðru viðmiði sem kallast TruthfulQA, sem samanstendur af 817 spurningum sem spanna heilsu, lög, fjármál og aðra flokka. Það fékk 26 prósent nákvæmni samanborið við 21 prósent OPT. Og í stærðfræðilegum hlutum viðmiðunar sem kallast MMLU, fór það fram úr DeepMind’s Chinchilla AI um 41,3 prósent í 35,7 prósent.
Það var einnig dæmt hafa staðið sig vel á ýmsum vísindasértækum viðmiðum, en sumir sem hafa lesið blaðið hafa gagnrýnt það fyrir að bera saman Galactica við almenn tungumálalíkön, sem ætti ekki að búast við að séu eins góð í að meðhöndla einstök mál. vísindalegar upplýsingar sem fyrirmynd eingöngu þjálfaðar á þeim. Aðrir hafa bent á að Galactica virðist koma vel auga á mikilvæg leitarorð, en tekst ekki við merkingarfræðileg smáatriði, til dæmis að gefa sama svar við “Hvað er prótein sem virkar EKKI með kólesteróli?” eins og það gerir við spurninguna “Hvað er prótein sem virkar með kólesteróli?”
Michael Black hjá Max Planck Institute for Intelligent Systems í Þýskalandi sagði á Twitter að þegar hann reyndi tólið væri útkoman „röng eða hlutdræg en hljómaði rétt og opinber“.
Edward Johns við Imperial College í London segir að fyrstu niðurstöður hans með því að nota Galactica hafi verið misjafnar. „Þetta er skemmtilegt tæki til að leika sér með og frábært framtak hjá Meta. Hins vegar fannst mér það hafa tilhneigingu til að skrifa hluti sem gætu verið trúverðugir fyrir ósérfræðing, en voru ekki endilega vísindalega nákvæmar. Og þó að einstakar setningar hafi verið skynsamlegar, var uppbyggingin á háu stigi oft ekki samfelld,“ segir hann.
Standist það próf Vísis IS?
Til að prófa Galactica bað Visiris gervigreindina – þó að aðgangur almennings að tólinu hafi verið fjarlægður af vefsíðu sinni þegar þetta var skrifað – að búa til Wikipedia síðu um tímaritið með því að nota hvetjandi „wiki grein á tímaritinu Vísi IS“. Það sem kom til baka las sannfærandi, í kunnuglegum stíl á Wikipedia-síðu. En upplýsingarnar voru allar rangar.
Frekar ónákvæm niðurstaða þegar við fólum Galactica að skrifa grein í Wikipedia-stíl á Vísi IS tímaritið
Meta Galactica AI
„Fyrsta tölublaðið var gefið út í júní 1939,“ stóð þar – í raun var það 1956. „Í fyrsta tölublaðinu var grein um uppgötvun pensilíns eftir Alexander Fleming,“ var haldið áfram. Það hefði sannarlega verið frábær ausa ef pensilín hefði ekki fundist 11 árum áður árið 1928.
Visiris er, samkvæmt Galactica, ekki lengur gefið út, en var áður prentað mánaðarlega. Í sannleika sagt er blaðið enn í gangi og nýtt tölublað kemur út í hverri viku.
Á yfirborðinu var framleiðsla Galactica sannfærandi, með viðurkenndum stíl sem hún hefur lært að líkja eftir úr fjölmörgum ritgerðum skrifuð af fræðimönnum, en hún féll niður á nákvæmni á næstum öllum staðreyndum.
Þetta atriði er viðurkennt af Meta, sem inniheldur fyrirvara undir framleiðslu Galactica: „VIÐVÖRUN: Úttak getur verið óáreiðanlegt! Tungumálalíkön eru hætt við að ofskynja texta.“
