Ugrás a tartalomra

AI hírek, hogy ne maradj le

2026. október 28., szerda · frissítve 22:52
Vissza a hírekhez
Sam Altman (X)2026. okt. 16. 18:22kutatás

Megfejthetővé vált a több milliárd paraméteres AI-modell belső működése

Nick Cammarata szerint a mesterséges intelligenciák belső hálózatai a korábbi feltevésekkel ellentétben átláthatók és értelmezhetők.

0
Kipróbálom: Already Clean Interpretability Studyalready-clean.goodfire.com
Very happy to see this from Nick!

A mesterséges intelligencia belső működésének feltérképezése, az úgynevezett mechanisztikus értelmezhetőség az egyik legfontosabb tudományos feladat a modellek biztonságossá tételéhez. Nick Cammarata az OpenAI korábbi kutatásaira építve közzétette legújabb tapasztalatait, amelyek szerint a korábban átláthatatlannak vélt neuronhálózatok belső struktúrája valójában logikus és felderíthető.

A korábbi technológiákkal a kutatók a neuronok mindössze 2 százalékának szerepét tudták meghatározni, ami miatt a szakterületen komoly pesszimizmus uralkodott. A modern ügynökalapú automatizált eszközökkel végzett vizsgálatok viszont megmutatták, hogy a több ezer milliárd paraméteres modellek belső áramkörei túlnyomórészt jól olvashatók, és a korábbi akadályok többsége nem létezik.

A kutató szerint az automatizált AI-tudósok fejlődésével az értelmezhetőség kérdése belátható időn belül megoldódik. Az eredményekről részletes elemzés olvasható a már elérhető online felületen.

Az eredeti szöveg (Sam Altman (X))
Very happy to see this from Nick! [IDÉZETT POSZT, amelyet Sam Altman megosztott. Eredeti szerzője: Nick (@nickcammarata); megjelent: 2026-10-15T15:40:54+00:00; link: https://x.com/nickcammarata/status/2110757819427574056; média: nincs média] interpretability might be the most important scientific problem in the world right now, as I don't think we can solve alignment if we don't know what we're building. I think I have good news about it. I co-authored early work in mechanistic interpretability at OpenAI and came away pessimistic, because neural networks appeared to fold into arbitrary tangled knots. years later, I started openai's first large-scale automated interpretability project, finding about 2% of neurons legible with the primitive tools we had with modern agentic tools and a much closer look, the picture looks totally different. the vast majority in models up to trillions of parameters are legible, and their circuits beautiful. many famous examples of tangled neurons turned out to be misunderstood. The roadblocks I expected mostly aren't there. I now think ambitious interpretability will be solved by the time we need it most, and possibly quite soon, as automated scientists keep improving. it may be a bitter lesson for interpretability: the simple thing, at absurd scale, works https://already-clean.goodfire.com/

Az oldal magától nem használ sütit. A hozzájárulásoddal a látogatottságot a Google Analytics, a Facebook-hirdetéseink eredményét a Meta pixel méri. Részletek