Habana Labs e Hugging Face si uniscono per accelerare l’addestramento dei modelli Transformer

Habana Labs e Hugging Face collaborano per accelerare l'addestramento dei modelli Transformer.

Santa Clara e San Francisco, CA, 12 aprile 2022

Alimentati dall’apprendimento profondo, i modelli di trasformatori offrono prestazioni all’avanguardia su una vasta gamma di compiti di apprendimento automatico, come l’elaborazione del linguaggio naturale, la visione artificiale, il riconoscimento vocale e altro ancora. Tuttavia, addestrarli su larga scala richiede spesso una grande quantità di potenza di calcolo, rendendo l’intero processo inutilmente lungo, complesso e costoso.

Oggi, Habana® Labs, pioniere nei processori di apprendimento profondo ad alta efficienza e appositamente progettati, e Hugging Face, la casa dei modelli di trasformatori, sono lieti di annunciare che si uniscono per rendere più facile e veloce l’addestramento di modelli di trasformatori di alta qualità. Grazie all’integrazione della suite software SynapseAI di Habana con la libreria open source Optimum di Hugging Face, gli scienziati dei dati e gli ingegneri di apprendimento automatico possono ora accelerare i loro lavori di addestramento dei trasformatori su processori Habana con poche righe di codice e godere di una maggiore produttività e di costi di addestramento inferiori.

Le soluzioni di addestramento Habana Gaudi, che alimentano le istanze EC2 DL1 di Amazon e il server di addestramento AI X12 Gaudi di Supermicro, offrono un rapporto prezzo/prestazioni fino al 40% inferiore rispetto a soluzioni di addestramento comparabili e consentono ai clienti di addestrare di più spendendo meno. L’integrazione di dieci porte Ethernet da 100 Gigabit su ogni processore Gaudi consente di scalare il sistema da 1 a migliaia di Gaudis con facilità ed efficienza dei costi. SynapseAI® di Habana è ottimizzato sin dall’inizio per garantire prestazioni e facilità d’uso di Gaudi, supporta i framework TensorFlow e PyTorch, con un focus sull’elaborazione di immagini e sull’elaborazione del linguaggio naturale.

Con oltre 60.000 stelle su Github, più di 30.000 modelli e milioni di visite mensili, Hugging Face è uno dei progetti a crescita più rapida nella storia del software open source e il punto di riferimento per la comunità dell’apprendimento automatico.

Attraverso il suo programma di partnership hardware, Hugging Face fornisce l’avanzato hardware di apprendimento profondo di Gaudi con l’ultima suite di strumenti per i trasformatori. Questa collaborazione consentirà una rapida espansione della libreria di modelli di trasformatori di addestramento di Habana Gaudi, portando l’efficienza e la facilità d’uso di Gaudi a una vasta gamma di casi d’uso dei clienti, come l’elaborazione del linguaggio naturale, la visione artificiale, il riconoscimento vocale e altro ancora.

“Siamo entusiasti di collaborare con Hugging Face e i suoi numerosi sviluppatori open source per soddisfare la crescente domanda di modelli di trasformatori che beneficiano dell’efficienza, dell’usabilità e della scalabilità della piattaforma di addestramento Gaudi”, ha dichiarato Sree Ganesan, responsabile della gestione del prodotto software di Habana Labs.

“Habana Gaudi porta a un nuovo livello di efficienza l’addestramento dei modelli di apprendimento profondo, e siamo entusiasti di rendere questa prestazione facilmente accessibile agli utenti dei trasformatori con modifiche minime al codice tramite Optimum”, ha detto Jeff Boudier, direttore del prodotto presso Hugging Face.

Per scoprire come iniziare ad addestrare con Habana Gaudi, visita https://developer.habana.ai.

Per ulteriori informazioni sulla collaborazione tra Hugging Face e Habana Gaudi, visita https://huggingface.co/Habana.