Что нового на GitHub — короткие обзоры на русском
обзоров: 1049 стратегий поиска: 5 обновляется ежедневно

Все материалы по теме «cuda»

Популярные теги
Фильтр по тегу: cuda  ✕ Сбросить

TensorFold: инференс языковых моделей на Apple Silicon и NVIDIA GPU

TensorFold — это движок для инференса языковых моделей на Apple Silicon и NVIDIA GPU с использованием Metal и CUDA. Он позволяет запускать модели без ...
Post image

Mooncake: платформа для развертывания больших языковых моделей

Mooncake — это платформа для развертывания Kimi, сервиса на базе больших языковых моделей от Moonshot AI. Она решает проблему эффективного обслуживани...
Post image

PegaInfer: движок вывода LLM на Rust и CUDA без PyTorch

PegaInfer — это движок для вывода LLM, построенный на Rust и CUDA, который позволяет использовать модели, совместимые с OpenAI, без зависимости от PyT...

vllm.cpp: C++ движок для эффективного запуска языковых моделей

vllm.cpp — это C++ движок, ориентированный на сообщество, аналогичный vLLM, предлагающий улучшенные функции, такие как GGUF и Cache-aware scheduling. ...
Post image

yzma: библиотека для интеграции llama.cpp в приложения на Go

yzma — это библиотека для интеграции `llama.cpp` в приложения на Go, позволяющая выполнять локальный инференс с аппаратным ускорением. Проект решает...
Post image

Kev: компактные модели принятия решений для разработчиков

Kev — это набор компактных моделей принятия решений, построенных на Qwen3.5, которые ты можешь тренировать и запускать сам. Основная задача проекта — ...
Post image

SemIf: создание семантических условий на основе открытых моделей

SemIf — это проект для создания семантических условий на основе открытых моделей, который можно запускать на своем GPU, например, на GeForce 3090. Он ...
Post image

Hugging Face Transformers: работа с моделями машинного обучения

Hugging Face Transformers — это библиотека для работы с современными моделями машинного обучения, поддерживающая текст, изображения, аудио и многомода...
Post image

vllm.cpp: C++-движок для работы с LLM без Python

vllm.cpp — это C++-движок, который является упрощённой альтернативой vLLM и предлагает функционал для работы с LLM без зависимости от Python. Проект...
Post image

cuVS: библиотека для векторного поиска и кластеризации на GPU

cuVS — библиотека для векторного поиска и кластеризации на GPU от NVIDIA. Она предназначена для реализации алгоритмов приближенного поиска ближайших с...
Post image

RAFT: библиотека алгоритмов и примитивов для ML с поддержкой CUDA

RAFT — это библиотека с основными алгоритмами и примитивами для машинного обучения и информационного поиска, ускоренными с помощью CUDA. Она предназна...