Refresh the page

Az üzemeltetési költségek kérdése

Publikálva • Szerző: Michal Rybka

Mekkora valójában a mesterséges intelligencia üzemeltetésének költsége? Ebben a lenyűgöző cikkben feltárjuk az AI működtetésével járó költségek és energiaigények változó világát. A modellek fejlesztésétől a klienseszközökön való hatékony alkalmazásig az AI története az innováció és az optimalizálás története. Tudd meg, milyen hatással van a technológiai fejlődés és a különböző stratégiák a költségek csökkentésére és az energiahatékonyság növelésére, és mit jelent mindez az AI jövőjére nézve a világunkban.

Mi költségei
  1. AI-modellek tanítása: miért olyan nehéz megbecsülni a költségeket?
  2. Miért olyan magasak az AI költségei?
  3. A GPT-4 betanításának költségei
  4. Az AI energiaigényének jövőbeli alakulása

AI-modellek tanítása: miért olyan nehéz megbecsülni a költségeket?

Jelenleg meglehetősen nehéz megbecsülni, hogy a mesterséges intelligencia bevezetése milyen valós üzemeltetési igényekkel jár. Ennek első oka, hogy még mindig kísérleti fázisban vagyunk, ahol az alkalmazást inkább tesztelik, mintsem rutinszerű üzemeltetésről lenne szó. A második ok pedig az, hogy továbbra is rendkívül gyors fejlődés zajlik, amelyben hamarosan talán maga a mesterséges intelligencia is segédkezni fog.

Miért olyan magasak az AI költségei?

Az AI-cégek jelenlegi magas igényei az adatközpontok építéséhez kapcsolódnak, ahol egyetlen mai rendszer Nvidia H100-zal nagyjából 35 ezer dollárba kerül, de mivel a szállítási várakozási idő meghaladja a 11 hónapot, az egyes darabokat az eBay-en akár 45 ezer dollárért is eladják. A jelenlegi dominancia az Nvidia számára kétségkívül előnyös és rendkívül jövedelmező, de ha a mesterséges intelligencia igazán nagy léptékben indul be, sokkal több chipre lesz szükség – nemcsak nagyobb teljesítményűekre, hanem alacsonyabb teljesítményű, de lényegesen kisebb fogyasztású és magasabb számítási hatékonyságú chipekre is.

Jelenleg a mesterséges intelligenciához épített nagy számítási központok létrehozása a nagy felhőszolgáltatók – például a Microsoft Azure és az Amazon AWS – területe, amelyek számítási kapacitást adnak bérbe a modellek tanításával foglalkozó cégeknek. A mesterséges intelligencia modellek fejlesztésével foglalkozó jelenlegi startupok befektetői pénzből működnek, és abban bíznak, hogy értékes szellemi tulajdonra tesznek szert, ami növeli a cég értékét, és így térítik vissza a befektetők pénzét.

MI költségei
Illusztratív fotó, forrás: Midjourney

A GPT-4 tanításának költségei

A nagy modellek tanításának költségei jelentősen eltérnek. Sam Altman, az OpenAI vezetője elmondta, hogy a GPT-4 modell tanítása 100 millió dollárba került az OpenAI-nak. A fejlesztőcsapat költségei sem elhanyagolhatók: a hagyományos fejlesztőkön (software developer) kívül a mesterséges intelligenciára specializálódott cégeknek adatelemzőkre (data scientist) és gépi tanulási szakemberekre (machine learning engineer) is szükségük van, akiknek a szaktudása kisebb csapatok esetén is évi nagyjából félmillió dollárral növeli az üzemeltetési költségeket.

Végső soron az a feltételezés, hogy az egyszerűbb AI-modellek (edge AI) működtetését a felhasználó maga fizeti majd az eszköz vételárában és az energiaköltségekben. A szervereken futó mesterséges intelligencia – mint például a Microsoft Copilot – esetében valószínűleg többszintű szolgáltatási modell alakul ki, az ingyenes szolgáltatásoktól a professzionális, havi vagy éves előfizetéssel igénybe vehető szolgáltatásokig. Ez a modell hasonlítana például a Microsoft OneDrive különböző szolgáltatási szintjeinek kínálatához.

Mesterséges intelligencia költségei
Illusztratív fotó, forrás: Midjourney

Amikor kérdezünk, avagy mennyibe kerül 1 prompt?

Ami a mesterséges intelligencia jelenlegi üzemeltetési költségeit illeti, a becslések lekérdezésenként (prompt) 0,0065 centtől – az olyan kevésbé igényes AI-modellek esetében, mint az Anthropic Claude Haiku – egészen 4 centig terjednek a komplexebb AI-k, például a Claude Opus esetében. Nyilvánvaló, hogy a jövőben ez az ár csökkenni fog: várhatóan mind a lekérdezésenkénti energiaigény, mind a chipek ára mérséklődik – és a mesterséges intelligencia modellek tanításának költségei is csökkennek.

A mesterséges intelligencia másik mesterséges intelligenciával történő tanításának korai kísérletei – amelyeket például a Llama modelleken végeztek – azt mutatták, hogy a tanítás akár két nagyságrenddel is olcsóbbá és gyorsabbá tehető. Azonban az a probléma, hogy ismételten bebizonyosodott: ha egy AI másik AI-tól tanul, hamis minták kerülnek a tanulási folyamatba, és általánosságban csökken a válaszok pontossága, ami azt jelenti, hogy ennek a tanítási modellnek megvannak a maga korlátai.

A legtöbb durva becslés szerint a mesterséges intelligencia energiafogyasztása elérheti a teljes villamosenergia-termelés két százalékát, de a részletekbe nehéz belelátni. Egy dolog a jelenlegi modellek, más dolog a nagyon kiterjedt modellek tanítására tervezett AI szuperszámítógépek, amelyeknél akár gigawattos nagyságrendű teljesítményfelvétellel kalkulálnak – és megint egészen más a hasonló modellek üzemeltetése, ahol éppen ellenkezőleg, a takarékos működésre összpontosítanak.

Mesterséges intelligencia költségei
Illusztratív fotó, forrás: Midjourney

Az AI energiaigényének jövőbeli alakulása

Így abba a helyzetbe kerülünk, hogy egyszerre épülnek hatalmas fogyasztású új adatközpontok, ugyanakkor az a terv, hogy az AI modellek gyakorlati üzemeltetésének nagy része otthoni, sőt mobil neurogyorsítókon fog futni, amelyek teljesítményfelvétele alacsonyabb, mint a hagyományos vagy mobil grafikus kártyáké. Az energiaigény alakulása tehát nagymértékben attól függ, hogy a hatalmas adatközpontok építésére irányuló törekvés kerekedik-e felül, vagy az AI üzemeltetés zöme takarékos hardverre koncentrálódik. 

i

Ezek a cikkek is érdekelhetnek:

A mesterséges intelligencia üzemeltetésének jelenlegi költségei és energiaigénye változó, és számos tényezőtől függ, beleértve az AI típusát, a számítási hardvert és a felhasználás célját. Míg az AI modellek fejlesztése és tanítása jelentős befektetést igényel nagy teljesítményű adatközpontokba, az AI modellek kliens eszközökön történő futtatása a hatékonyságra és a költségek minimalizálására összpontosít. A stratégiák és technológiák úgy fejlődnek, hogy megfeleljenek az AI számítások iránti növekvő igényeknek, miközben egyidejűleg a költségek és az energiafogyasztás csökkentésére is törekszenek. Az AI költségeinek és energiahatékonyságának jövőjét valószínűleg a hardveres innovációk, a modelltanítási módszerek és az AI elosztott, edge eszközökön történő üzemeltetése felé mutató trend fogja meghatározni.

Try our cookies

Alza.cz a. s., Company identification number 27082440, use cookies and other data to ensure the proper functioning of the website and, with your consent, also, among other things, to personalize advertising and the content of our websites. By clicking on the “I understand“ button, you agree to the use of cookies and the transfer of data regarding the behavior on the website for displaying targeted advertising on social networks and advertising networks on other websites.

More information
I understand Detailed settings Reject everything
P-DC1-WEB25