AgentPantheon
New API logo

New APIOpen-Source-LLM-Gateway, der mehrere KI-Anbieter-APIs vereint – mit Routing, Abrechnung und Analyse

4.3 (4)
Daniel NikulshynGeprüft von Daniel Nikulshyn·Aktualisiert Juni 2026

Übersicht

New API ist ein Open-Source-LLM-Gateway, das eine einheitliche Schnittstelle für die Verbindung zu mehreren KI-Modell-Anbietern bietet, darunter OpenAI, Anthropic Claude und Google Gemini-ähnliche APIs. Es fungiert als zentrale Verwaltungsschicht, die es Teams ermöglicht, Anfragen über verschiedene Anbieter zu routen, Zugriffe zu steuern und die Nutzung von einem Ort aus zu verfolgen. Das Projekt richtet sich an Entwickler, Plattform-Teams und Organisationen, die KI-APIs in großem Maßstab konsumieren und einen einzelnen Gateway bevorzugen, anstatt jeden Anbieter einzeln zu integrieren. Durch die Bereitstellung OpenAI-kompatibler Endpunkte lässt es bestehende Anwendungen und SDKs mit vielen Backends arbeiten, ohne Client-Code umzuschreiben. Neben dem einfachen Proxying konzentriert sich New API auf betriebliche Aspekte wie tokenbasierte Kontingente, Abrechnung und Kreditverwaltung, Anfrage‑Auditing und Nutzungsanalyse. Diese Funktionen machen es geeignet für den Aufbau interner KI-Plattformen oder das Wiederverkaufen/Messen des Zugangs für mehrere Benutzer oder Teams. Als Open-Source‑, selbsthostbares Tool gibt es Betreibern die Kontrolle über Deployment und Datenfluss, was für Kostenmanagement und Compliance wichtig sein kann. Es positioniert sich im selben Markt wie andere API‑Gateways und Aggregatoren wie LiteLLM und One API, von denen es abgeleitet ist. Wie bei den meisten selbstgehosteten Gateways erfordert die Einführung von New API eine Infrastrukturaufsetzung und kontinuierliche Wartung, und das Ausmaß der Anbieterunterstützung sowie die Stabilität hängen von den Community-Beiträgen ab.

Hauptfunktionen

  • Zentralisiertes Multi-Provider-API-Gateway
  • OpenAI-kompatible Endpunkte
  • Anfrage‑Routing über mehrere Modellanbieter
  • Token‑Kontingente und Abrechnung
  • Nutzungsanalyse und Auditing

Preise

Modell
Freemium
Bewertung
4.3 / 5 (4)

Anwendungsfälle

Mehranbieter‑LLM‑Zugang vereinheitlichen

Routen Sie Anfragen über OpenAI, Claude und Gemini über eine einzige API, um die Integration zu vereinfachen und Vendor Lock‑In für Engineering‑Teams zu reduzieren.

Kontingente durchsetzen und Team‑Abrechnung

Wenden Sie pro Benutzer oder pro Team Kontingente an und verfolgen Sie die Nutzung für interne Kostenabrechnungen, um einen kontrollierten LLM‑Verbrauch in der gesamten Organisation zu ermöglichen.

Auditieren und Analysieren der LLM‑Nutzung

Erfassen Sie detaillierte Logs und Analysen zu LLM‑Anfragen, um Compliance‑Audits, Kostenoptimierung und Leistungsüberwachung zu unterstützen.

Selbstgehostete KI‑Infrastruktur

Stellen Sie ein Open‑Source‑Gateway vor Ort bereit, um die Datenkontrolle zu wahren und den Zugriff auf mehrere LLM‑Anbieter zu standardisieren.

Pro & Contra

Pro

  • Open-Source und selbsthostbar für vollständige Kontrolle
  • Vereint viele KI-Anbieter hinter einer kompatiblen API
  • Integrierte Kontingente, Abrechnung und Nutzungsanalyse
  • Auditing und Zugriffsverwaltung für Mehrbenutzer‑Setups

Contra

  • Erfordert Selbsthosting und laufende Wartung
  • Funktionsumfang hängt von Community‑Beiträgen ab
  • Dokumentation könnte für Neueinsteiger lückenhaft sein

Bewertungen

4.3

Durchschnitt aus 4 Bewertungen.

5
1
4
3
3
0
2
0
1
0

Melde dich an, um eine Bewertung abzugeben.

M

Compared a few options

Evaluated this against two competitors. Where it wins: the dashboard and the value for money is strong. Where it lags: the docs could be deeper. On balance the feature set — especially the dashboard — justifies the 4 stars for our use case.

W

Wei Chen

Jul 28, 2025

Use it every day

Honestly didn't expect to like it this much. The dashboard is exactly what I needed, and it saves real time. I do wish pricing gets steep at scale, but I reach for it almost every day now and it just clicks.

J

Jamal Carter

Jul 11, 2025

Solid for our team

We rolled this out across the team last quarter and it saves real time. The onboarding fits neatly into how we already work, and the core workflow removed a step we used to do by hand. The mobile experience lags, which is the main caveat, but it has held up under daily use.

A

Aaliyah Johnson

Jun 18, 2025

Compared a few options

Evaluated this against two competitors. Where it wins: the integrations and it is genuinely easy to set up. Where it lags: pricing gets steep at scale. On balance the feature set — especially the core workflow — justifies the 4 stars for our use case.

Fragen & Antworten

What operational features does New API offer beyond basic API proxying?

Beyond routing requests to multiple LLM providers, New API includes built-in quotas, billing, auditing, and usage analytics, making it suitable for teams that need to manage, monitor, and control LLM consumption centrally.

Which LLM providers and API formats does New API support?

New API acts as a unified gateway for major LLM APIs, including OpenAI-, Claude-, and Gemini-style endpoints, letting you route requests across providers through a single consistent interface.

Is New API free, and can it be self-hosted?

Yes. New API is open-source, so you can self-host it without licensing fees. Your only costs are the infrastructure you run it on and the usage fees charged by the upstream LLM providers it connects to.

Frage stellen

Alternativen zu AI Model Serving Platforms