Что это?
Единый OpenAI-совместимый API-шлюз, который маршрутизирует запросы к десяткам LLM-провайдеров через один эндпоинт — с балансировкой нагрузки, автоматическим failover, управлением ключами и поканальным учётом расхода токенов.
Единый OpenAI-совместимый API-шлюз, который маршрутизирует запросы к десяткам LLM-провайдеров через один эндпоинт — с балансировкой нагрузки, автоматическим failover, управлением ключами и поканальным учётом расхода токенов.
Единый OpenAI-совместимый API-шлюз, который маршрутизирует запросы к десяткам LLM-провайдеров через один эндпоинт — с балансировкой нагрузки, автоматическим failover, управлением ключами и поканальным учётом расхода токенов.
Было: отдельная интеграция, свой ключ и свой биллинг под каждого AI-провайдера. → Стало: один эндпоинт ко всем моделям с автопереключением при сбоях и единым учётом расходов.
Реализовано на стеке: Go, Gin, React, Redis. Один OpenAI-совместимый эндпоинт прячет все провайдеры за собой, сам выбирает канал и переключается при сбоях.
Каждая LLM-модель — это своя интеграция, свой формат ключей и свои лимиты, которые приходится поддерживать вручную.
Один OpenAI-совместимый эндпоинт прячет все провайдеры за собой, сам выбирает канал и переключается при сбоях.
Приём запросов
Go · Gin · OpenAI-совместимый API
Выбор канала
Балансировка · Failover · Приоритеты
Учёт токенов
Redis · MySQL · Квоты
Панель управления
React · Ключи · Аналитика
Приём запросов
Go · Gin · OpenAI-совместимый API
Выбор канала
Балансировка · Failover · Приоритеты
Учёт токенов
Redis · MySQL · Квоты
Панель управления
React · Ключи · Аналитика
API ко всем моделям
простоя при сбое провайдера
автономная маршрутизация