GPUИндекс

Аренда GPU для машинного обучения

Сервер для обучения ИИ это карты с HBM и NVLink: A100, H100, H200. Аренда GPU для машинного обучения дешевле покупки кластера на прогоны в недели и месяцы.

Ниже цены за час. Дообучение готовой модели часто влезает в 24 ГБ, это другая подборка.

Сравните цены на аренду видеокарт у 34 провайдеров России, Беларуси и Казахстана

A100

Средние модели, 40–80 ГБ HBM

L40S и RTX 6000

48–96 ГБ GDDR, LoRA и небольшие модели

Флагманы

Обучение с нуля, NVLink, большой HBM

H100, H200 и A100 80GB. A100 40GB для моделей меньше 70B.

Сколько VRAM для обучения

70B в FP16 это примерно 140 ГБ суммарно. Одна A100 80GB или H100 тянет меньше. Большие LLM с нуля учат на нескольких картах через NVLink.

Обучение и дообучение

Обучение с нуля гоняет все веса и долго занимает сервер. LoRA влезает в 24 ГБ и дешевле по времени. Готовую модель дообучают на странице дообучения LLM.