Наскоро отбелязахме, че DeepSeek е създал модел с изкуствен интелект (AI) за около $5 милиона, който съответства на производителността на модела на OpenAI за $100 милиона. Сега научаваме, че изследователски екип от Калифорнийския университет в Бъркли (UC Berkeley) според съобщенията е пресъздал основната технология зад DeepSeek само за $30, пише проф. Гейл Пули в своя бележка за блога на Human Progress.
Според Браян Роймели, кандидатът за докторска степен в UC Berkeley Джиан Пан и неговият екип възпроизвеждат възможностите за усилване на обучението на DeepSeek R1-Zero, използвайки компактен езиков модел, наречен TinyZero. Този механизъм за обучение с подсилване с отворен код използва парадигмата за самостоятелна игра, първоначално въведена от DeepMind при разработването на AlphaZero, за да постигне майсторство в игрите шах, шоги и го.
Изумително ниската цена на тази репликация подчертава нарастваща тенденция: Докато технологичните гиганти наливат огромни суми в разработването на AI, независими изследователи с отворен код доказват, че високопроизводителният AI може да бъде изграден за малка част от досегашните разходи. Всъщност TinyZero е свободно достъпен за изтегляне от GitHub.
Програмата TinyZero постигна производителност на ниво DeepSeek, като нае два чипа H200 Nvidia за по-малко от пет часа само за $6,40 на час.
Тази работа от китайска изследователска компания за AI може да отбележи повратна точка в развитието на AI, доказвайки, че революционният напредък не изисква огромни ресурси – само умно мислене и правилен подход.
Работата на Пън и екипа му показва, че за цената на един модел DeepSeek можете да създадете 166 667 модела TinyZero.
Разрушителните иновации прекъсват разрушителните иновации. Клейтън Кристенсен, създателят на теорията за „разрушителните иновации“, би бил доволен. Междувременно инициативата за инфраструктура Stargate AI на стойност 500 милиарда долара, обявена преди 10 дни от президента Тръмп, вече изглежда остаряла. Човешкият интелект продължава да открива все по-ефективни начини за обучение на AI. Търпение – тази революция едва започва.