Tekijä: aikamoinen

  • DOGE tarjosi valtion työntekijöille AI-demoa

    Esikatselukuva

    "Yleispalveluvirasto" GSA:n työntekijät eivät tästä tehostavasta työkalusta innostuneet vaan päinvastoin vihastuivat ja kauhistuivat. "GSAi" osaa lähinnä avustaa sähköpostien kirjoittamisessa taikka yksinkertaisten verkkosivujen luomisessa.

    Sen sijaan tarpeelliset työkalut, joita GSA:n työntekijät ovat käyttäneet vuosia, kuten Adoben sovelluskirjasto, on viety työntekijöiltä pois. Työkalun on tarkoitus lopulta päästä käsiksi valtiollisiin tietokantoihin. Vahva lukusuositus sekä Wiredin jutulle, kuten myös alta löytyvälle säikeelle:

    Ote artikkelista: Leaked chats obtained by WIRED detail plans for the General Services Administration—and the staff’s angry response.

    Linkki artikkeliin

  • ChatGPT hallusinoi norjalaiselle murhatuomion

    Esikatselukuva

    OpenAI sai jälleen valituksen väärän tiedon levittämisestä. Tällä kertaa botti keksi norjalaismiehelle rikostuomion lastensa murhasta. GDPR:n mukaan kaiken henkilödatan tulisi olla totuudellista – mikä taas on vaikeaa hallusinointikoneelle.

    Aiemmat tapaukset ja valitukset ovat koskeneet mm. vääriä syntymäaikoja, mutta tällä kertaa kyse on jo selvästi mainehaitasta. Vahva lukusuositus jutulle, joka käy läpi sekä ko. tapausta että valitusten jumiutumista Irlannin datasuojelukomissioon (joka mm. on vastustanut LLM-palveluiden EU-kieltoa).

    Ote artikkelista: OpenAI is facing another privacy complaint in Europe over its viral AI chatbot's tendency to hallucinate false information — and this one might prove

    Linkki artikkeliin

  • Seuraa tutkimus🧵

    Esikatselukuva

    Hiljattain testasimme @ilonakousa.bsky.social kanssa, miten ChatGPT-4o analysoi poliittista keskustelua suomenkielisillä aineistoilla vihreän siirtymän käsittelystä eduskunnassa ja somessa. Konteksti-ikkuna & aineistotyyppi vaikuttivat vaffasti analyysin tuloksiin.
    1/

    Paperissa selvitimme mm.

    * Muuttaako eri tekstityyppien sekoittaminen (tweetit + puheet) tarkkuutta? [JO VAIN!]
    * Vaikuttaako chatti-ikkunan sisäinen kontekstin rakentaminen analyysituloksiin? [AND HOW!]
    * Voidaanko LLM korvata tai tukea ihmisanalyysia poliittisessa keskustelussa? […]

    2/

    Aineistona siis 20 twiittiä + 20 eduskuntapuhetta COP27-konferenssin ajalta syksyltä 2022. Testasimme ChatGPT-4o:ta (julkaistu 5/2024) eri skenaarioissa: zero-shot (erilliset chatit) vs. few-shot (sama chatti) sekä sekoitetut vs. erotellut aineistot.

    3/

    Tuloksia:
    *Konteksti vaikuttaa! Zero-shotissa tulokset olivat hajanaisempia, kun taas 1-ikkuna-analyysi tuotti tasaisempaa luokittelua – muttei aina tarkempaa
    *Tekstien järjestys vaikutti tulokseen. Aloittamalla twiiteillä saatiin enemmän avainsanoja & aiheita. Malli ”oppii” aiemmista syötteistä
    4/

    *Twiittien & puheiden sekoittaminen samaan chattiin sai ChatGPT:n välillä ”eksymään”. Vastaukset muuttuivat keskustelunomaisiksi tai sisälsivät "kommentaaria". Esim: Twiitti, joka alkoi sanalla ”Sorry”, sai mallin vastaamaan englanniksi joviaalilla ympäristöpuheella (poiketen tehtävänannosta) 😅
    5/

    Sitten se oma suosikkiosioni eli KONTEKSTI-IKKUNA: Pidemmissä aineistoissa, joissa kaikki tekstit syötettiin kerralla (esim. csv(txt-tiedostot ) malli ”laiskistui” entisestään. Kun mitta tuli täyteen, se alkoi analysoida samoja tekstejä uudelleen tai keksiä uusia ”aineistoja”
    #LazyLanguageModel
    6/

    Laiskuudesta löytyy esimerkkejä tutkimuksen liitteistä. Kun puheet olivat tiedostossa ensin, ei malli koskana päässyt analysoimaan twiittejä vaan niiden sijaan se "analysoi" mutatoituja versioita ensimmäisestä 9 käsittelemästään puheesta. En erikseen suosittele pitkien tekstidokujen käsittelyyn.
    7/

    Ote artikkelista: In recent years, large language model (LLM) applications have surged in popularity, and academia has followed suit. Researchers frequently seek to automate text annotation – often a tedious task – and…

    Linkki artikkeliin

  • New York Times luo haitallista narratiivia kielimalleja inhimillistämällä

    Sarjassamme tekoälyä ja LLM-botteja inhimillistäviä medianarratiiveja, joissa sekoitetaan mm. se, miten botti peilaa käyttäjänsä käyttämää ahdistavaa kieltä siihen, että botti itse "tuntisi" ahdistumista.

    Lue alkuperäinen postaus

  • LLM-hakukoneet eivät osaa viitata lähteisiinsä luotettavasti

    Esikatselukuva

    Väki käyttää enenevissä määrin ChatGPT:tä ja verrokkeja hakukoneinaan. 8:n suositun "työkalun" testauksessa kävi ilmi, että yleisen sepittelyn lisäksi mm. premium-palvelut olivat ilmaisversioita useammin itsevarmasti väärässä.

    Ote artikkelista: We Compared Eight AI Search Engines. They’re All Bad at Citing News.

    Linkki artikkeliin

  • Jo monennes testi eräälle kikkareelle

    Esikatselukuva

    Ei vieläkään mitään nähtävää. Jatka matkaa. Ota kuppi kahvia kestomukiin. Minä yhäti rakentelen kikkaretta, joka keräilee juttuja feedistäni. Koeajantaa. Dolor sit amet.

    Ote artikkelista: In recent years, large language model (LLM) applications have surged in popularity, and academia has followed suit. Researchers frequently seek to automate text annotation – often a tedious task – and…

    Linkki artikkeliin

  • Testailen yhtä kikkaretta

    Esikatselukuva

    Ei mitään nähtävää siis. Joten jatka matkaa. Rakentelen kikkaretta, joka keräilee juttuja feedistäni. Koeajoa. Lorem ipsum.

    jdmdh.episciences.org/15304

    Ote artikkelista: In recent years, large language model (LLM) applications have surged in popularity, and academia has followed suit. Researchers frequently seek to automate text annotation – often a tedious task – and…

    Linkki artikkeliin

  • Parasta ja ei mitenkään ongelmallista, että esim

    eestiläiset oppilaat saavat nauttia vastaisuudessa tällaisista työkaluista opetuksessaan. Goddamn, tätä aikalinjaa.

    Lue alkuperäinen postaus