Назад к дайджесту
GitHub

TensorSharp — C# движок для локального запуска LLM

TensorSharp — это движок инференса на C# для локального запуска больших языковых моделей через файлы GGUF. Инструмент предоставляет веб-интерфейс, консоль и API, совместимые с Ollama и OpenAI, с полной поддержкой GPU на основных ОС.

212 forksC++score 66.2
gemma3qwenqwen3inferencetransformersgemma4llmgemmametalinference-engine