Vai al contenuto principale

Documentation Index

Fetch the complete documentation index at: https://apidoc.cometapi.com/llms.txt

Use this file to discover all available pages before exploring further.

Langfuse offre observability per LLM, gestione dei prompt, playground e workflow di valutazione. Configura una LLM Connection di Langfuse con CometAPI quando vuoi che Langfuse Playground o le valutazioni LLM-as-a-Judge chiamino i modelli CometAPI.

Prerequisiti

Configura l’integrazione

1

Create a Langfuse LLM connection

In Langfuse, apri Project SettingsLLM Connections. Avvia il flusso per aggiungere una API key LLM.
2

Choose the OpenAI adapter

Seleziona OpenAI come provider. Langfuse usa questo adapter per i provider di modelli che supportano lo schema API di OpenAI.
3

Enter CometAPI credentials

Configura la connessione con questi valori:
FieldValue
API keyLa tua API key CometAPI
Base URLhttps://api.cometapi.com/v1
Custom model IDsUno o più model IDs dalla pagina Modelli di CometAPI
Se Langfuse mostra il campo base URL in Advanced Settings, espandi quella sezione prima di salvare la connessione.
4

Test in Playground

In Langfuse Playground, seleziona la LLM connection di CometAPI e uno dei model IDs configurati. Invia un prompt breve per confermare che Langfuse riceva una risposta.

Usa CometAPI per LLM-as-a-Judge

I valutatori LLM-as-a-Judge di Langfuse possono usare la stessa LLM connection. Seleziona la connessione CometAPI nella configurazione del valutatore, quindi scegli un model ID che supporti il tool calling se il tuo prompt di scoring richiede un’estrazione strutturata. Usa le opzioni del provider solo quando il modello CometAPI selezionato supporta quei campi della richiesta. Per individuare i modelli, usa la pagina Modelli di CometAPI o l’API /v1/models.

Risoluzione dei problemi

Aggiungi il model ID esatto di CometAPI all’elenco dei custom model IDs nella LLM connection. Langfuse non rileva automaticamente tutti i modelli per i provider personalizzati compatibili con OpenAI.
Usa https://api.cometapi.com/v1 come base URL. Langfuse aggiunge il percorso compatibile con OpenAI per l’adapter selezionato.
Verifica che il modello selezionato supporti le funzionalità di richiesta usate dal valutatore, come tool calling o output JSON.

Risorse correlate