Назад к дайджесту
Reddit

Что можно запустить на системе с Tesla V100 для локальных LLM

Пользователь приобрёл видеокарту Tesla V100 на 32 ГБ для экспериментов с локальными языковыми моделями. Он ищет рекомендации по подходящим моделям и софту для своего сервера Dell PowerEdge 730 с 384 ГБ оперативной памяти.

score 40r/LocalLLaMA