Пробивите на AI на DeepSeek са скок напред, който предизвиква индустриални гиганти като OpenAI. Чрез оптимизиране на ефективността, намаляване на хардуерните изисквания и възприемане на експертен системен подход, DeepSeek е пример за това как технологичният прогрес води до изобилие, изтъква в свой анализ блогърът на Human Progress Гейл Пули…
Иновациите могат да възникват внезапно и с драматични изригвания, като например когато телеграфът заменя Pony Express. Този емблематичен пощенски оператор съкращава предишните срокове за доставка наполовина и царува 18 месеца като най-бързият начин за доставяне на информация в Съединените щати. Pony Express е въведен на 3 април 1860 г. и доставя поща между Сейнт Джоузеф, Мисури, и Сакраменто, Калифорния. Маршрутът от 2000 мили отнема приблизително 10 дни, като ездачите изминават 75 до 100 мили всеки и сменят конете на всеки 10 до 15 мили.
Western Union издига първите телеграфни стълбове на 4 юли 1861 г. Строителството отнема 112 дни, за да завърши първата електронна трансконтинентална комуникационна система на 24 октомври 1861 г. Два дни по-късно Pony Express е спрян.
Телеграфът намали времето, необходимо за доставяне на съобщение с 99,93 процента, от 10 дни на 10 минути. Изпращането на съобщение става с 1 439 900 процента по-бързо.
Свидетели ли сме на още една иновация от пони към електрони между OpenAI и DeepSeek? Може би.
Питър Диамандис отбеляза, че DeepSeek е основан преди по-малко от две години. Със само 200 служители и 5 милиона долара DeepSeek разработва нова система с изкуствен интелект (AI). За сравнение, OpenAI е основана преди 10 години, има около 4500 служители и е набрала капитал от 6,6 милиарда долара. Технологични гиганти с изкуствен интелект като OpenAI и Anthropic харчат 100 милиона долара или повече, за да обучат своите модели. DeepSeek отговаря на техните системи за 95 процента от цената. Спад от 95 процента в цената означава, че сега получавате 20 на цената на един, което показва 1900 процента увеличение на изобилието. DeepSeek прави това с три иновации:
- Преосмислена прецизност. Вместо да използват излишни изчисления (32 знака след десетичната запетая), те доказаха, че 8 знака след десетичната запетая са достатъчни. Резултатът е 75 процента по-малко необходима памет. Понякога най-мощните иновации идват от поставяне под въпрос на най-основните допускания.
- Революцията на скоростта. Традиционният AI чете като първокласник: „Котката . . седна . .” Но мултитокен системата на DeepSeek обработва цели фрази едновременно: 2 пъти по-бързо с 90 процента точност. Когато обработвате милиарди думи, това е трансформиращо.
- Експертната система. Вместо един масивен AI, който се опитва да знае всичко (представете си, че един човек е лекар, адвокат и инженер), те изградиха система от специалисти. Традиционните модели разчитат на 1,8 трилиона параметри, които са активни през цялото време. DeepSeek, напротив, разчита на общо 671 милиарда, но само 37 милиарда са активни наведнъж (97,9 процента по-малко).
Диамандис отбелязва по-зашеметяващи резултати от иновациите на DeepSeek:
- разходите за обучение са намалени от $100 милиона на $5 милиона;
- Изискванията за GPU са намалени от 100 000 GPU на 2000 GPU;
- 95 процента намаление на разходите за API;
- работи на графични процесори за игри вместо на специализиран хардуер;
- направен е с екип от по-малко от 200 души, а не хиляди.
Системата DeepSeek е с отворен код, което означава, че всеки може да провери, надгради и внедри тези иновации. Можете да изтеглите новото приложение на вашия iPhone.
Бонус: AI вече има контрапункт на еколозите, които казват, че AI използва толкова много електричество. DeepSeek току-що намали цената с 97 процента.
Кати Ууд от ARK Investment отбелязва, че „през последните няколко години разходите за обучение и функциониране на изкуствен интелект спадат съответно със 75% и 85-90%. DeepSeek може да ускорява темпото на промяната, но спадовете вече са драматични“.
Законът на Мур предполага, че изобилието от компютърни транзистори се удвоява на всеки две години. Това би означавало комбинирано около 41,4 процента годишно. Разходите за обучение на AI система за разпознаване на изображения са паднали с 99,59% от $1112,64 през 2017 г. до $4,59 през 2021 г. Това би означавало комбиниран процент от 295% на година. AI расте над седем пъти по-бързо от закона на Мур.
Nvidia ръководи разработването на тези системи и техният главен изпълнителен директор Дженсън Хуанг твърди, че производителността на обработката на AI се е увеличила с „не по-малко от един милион през последните 10 години“. Това е комбиниран годишен процент от 298 процента. Той очаква този темп да продължи през следващите 10 години. Това би означавало, че преминаваме от едно до един трилион за двадесет години. Ще изпреварим 976 милиона пъти закона на Мур. Направо удивително.
Пони Експрес се нуждаеше от много бързи коне и кльощави ездачи. Телеграфът е изцяло нова платформа, която вместо това използва тел, батерии и стълбове. DeepSeek може да е Western Union към Pony Express.
И така, какво да кажем за Stargate – американска инициатива за AI инфраструктура на стойност 500 милиарда долара, ръководена от Сам Алтман от OpenAI, Лари Елисън от Oracle и Масайоши Сон от Softbank? Те искат да похарчат 100 000 пъти повече, отколкото DeepSeek е похарчил досега. Ще бъде ли техният продукт 100 000 пъти по-ценен?
Главният изпълнителен директор на Microsoft Сатя Надела повдигна парадокса на Джевън по отношение на DeepSeek. На 26 януари 2025 г., в платформата X, той каза: „Парадоксът на Джевънс удря отново! Тъй като изкуственият интелект става все по-ефективен и достъпен, ще видим рязко нарастване на употребата му, превръщайки го в стока, от която просто не можем да се наситим.“
На 6 януари Nvidia обяви новата си линия Nano от хардуер за разработка на AI, започваща от $259 и новия си проект DIGITS като „най-малкия суперкомпютър с изкуствен интелект в света, способен да управлява модели с 200B параметри“ и се очаква да бъде на цена от около $3000. Между софтуера с отворен код на DeepSeek и хардуера на Nvidia, светът може да изпита брилянтен разцвет на свръхизобилие в обучението.
Очакваме да видим AI да постигне драматичен напредък в способността ни да откриваме ценни нови знания, но също така ще разберем, че единственият интелект в изкуствения интелект досега е бил човешкият интелект. Ако хората имат свободата да правят иновации, потенциалът за създаване на ресурси е безкраен.
