H

Hugging Face Transformers

IA & Machine Learning · Depuis 2018

2018

Creation

GitHub

Librairie de reference pour les modeles pre-entraines avec un Hub de 500k+ modeles open-source couvrant NLP, vision et audio. Son API pipeline permet d'utiliser un modele en 3 lignes de code. Supporte PyTorch, TensorFlow et JAX comme backends.

mlnlpmodels
Avantages & Inconvenients

Avantages

  • Hub de 500k+ modeles telechargeables en une ligne de code
  • API pipeline : inference en 3 lignes pour classification, generation, traduction
  • Compatible PyTorch, TensorFlow et JAX sans changer le code modele

Inconvenients

  • Installation lourde : transformers + torch + tokenizers = 2Go+ d'espace disque
  • Modeles volumineux (Llama 70B = 140Go en fp16) necessitent GPU couteux
  • Abstraction parfois opaque : difficile de customiser le training loop
Cas d'usage
  • Fine-tuning de modeles de langage sur des donnees metier specifiques
  • Deploiement de modeles NLP en production avec Inference Endpoints
  • Classification d'images et detection d'objets avec modeles vision pre-entraines

Autres dans IA & Machine Learning

T

TensorFlow

IA & Machine Learning

Framework ML end-to-end (training a deploy)

mltraininggoogle
P

PyTorch

IA & Machine Learning

Framework ML standard recherche (80% arXiv)

mlresearchmeta
O

OpenAI API

IA & Machine Learning

API GPT-4o/o1, leader ecosysteme LLM

llmapiproprietary
A

Anthropic Claude API

IA & Machine Learning

API Claude : 200k tokens, alignement avance

llmapialigned