Quantcast
Channel: Все публикации подряд на Хабре
Viewing all articles
Browse latest Browse all 25558

Поднимаем DeepSeek llm локально

$
0
0

Все уже слышали про новую модель deepseek r1, которая обогнала по бенчмаркам openai. Компания Deepseek выложила веса и дистилляты в открытый доступ, благодаря чему мы можем их запустить.

В статье поднимем дистилляты модели r1 используя llama.cpp - потребуются лишь базовые умения работы с bash, docker и python. Самостоятельный запуск проще простого.

Читать далее

Viewing all articles
Browse latest Browse all 25558

Trending Articles