Lisää todisteita siitä, että LLM:t eivät ole tietoisia eivätkä yleistä mitään tietoa, eivätkä siksi tule yleisesti älykkäiksi, vaan ovat itse asiassa (edelleen erittäin hyödyllisiä) koulutettuja tilastollisiin vastaajiin.
Lossfunk
Lossfunk19.3. klo 22.14
🚨 Yllättävää: Frontierin LLM:t saavat 85–95 % standardeissa koodaustesteissä. Annoimme heille vastaavia tehtäviä kielillä, joita he eivät olisi voineet opetella ulkoa. Ne romahtivat 0–11 prosenttiin. EsoLang-Bench esitellään. Hyväksytty Loogisen päättelyn ja ICBINB:n työpajoihin ICLR 2026 🧵 -tapahtumassa
Tietojenkäsittelytieteen valmistuneille annetaan koodaushaasteita kielillä, joita he eivät ole ennen nähneet + ja vähän syntaksia ja heitä pyydetään tekemään asioita kuten koodaamaan Fibonacci-sekvenssi todistaakseen, etteivät he vain toista koko ajan Ja se seuloo ihmisiä, mutta ei 90 %
71