Red Hot Cyber
Condividi la tua difesa. Incoraggia l'eccellenza. La vera forza della cybersecurity risiede nell'effetto moltiplicatore della conoscenza.
Cerca
Fortinet 970x120px
UtiliaCS 320x100

Tag: #cpu

Come Funziona Davvero un LLM: Costi, Infrastruttura e Scelte Tecniche dietro ai Grandi Modelli di Linguaggio

Negli ultimi anni i modelli di linguaggio di grandi dimensioni (LLM, Large Language Models) come GPT, Claude o LLaMA hanno dimostrato capacità straordinarie nella comprensione e generazione del linguaggio naturale. Tuttavia, dietro le quinte, far funzionare un LLM non è un gioco da ragazzi: richiede una notevole infrastruttura computazionale, un investimento economico consistente e scelte architetturali precise. Cerchiamo di capire perché. 70 miliardi di parametri: cosa significa davvero Un LLM da 70 miliardi di parametri, come LLaMA 3.3 70B di Meta, contiene al suo interno 70 miliardi di “pesi”, ovvero numeri in virgola mobile (di solito in FP16 o BF16, cioè 2

ZeroGPU e la GPU non la compri più! L’Intelligenza Artificiale ora è alla portata di tutti

Hugging Face, noto per le sue soluzioni aperte nel campo dell’intelligenza artificiale, ha annunciato il lancio del programma ZeroGPU. L’iniziativa da 10 milioni di dollari fornirà potenza di calcolo basata su GPU Nvidia legacy per uso pubblico. L’obiettivo del programma è alleggerire l’onere finanziario che i piccoli team di sviluppo devono affrontare durante la creazione di modelli di intelligenza artificiale. Il CEO di Hugging Face, Clem Delang, ha annunciato personalmente il lancio di ZeroGPU, sottolineando che la comunità open source non dispone delle risorse di cui dispongono le grandi aziende tecnologiche, motivo per cui applicazioni come ChatGPT sono ancora le più popolari. “Stiamo lanciando ZeroGPU per fornire agli

Intel si prepara a produrre processori utilizzando standard a 2 nm: i chip basati su Intel 18A appariranno nel 2025

Per molto tempo, Intel è rimasta il leader mondiale nel mercato dei semiconduttori. Gli ingegneri dell’azienda hanno apportato numerose innovazioni e sono stati i primi a padroneggiare la tecnologia di processo a 14 nm. Sembrava che avessero bisogno di andare avanti, ma invece il management si è concentrato sull’acquisizione di startup e ha preferito crogiolarsi nella gloria.  Non c’erano quasi concorrenti all’orizzonte, ma anni dopo divenne evidente che alcune pratiche si rivelarono un fallimento. Di conseguenza, dopo diversi anni Intel è stata in grado di rilasciare processori con tecnologia a 10 nm, ma ancora una volta si è scontrata contro un muro. Nel 2023 è stata

Categorie