استخدم Promptfoo مع CometAPI

Promptfoo هو إطار عمل لتقييم Prompt واختبار الانحدار وعمليات red teaming للذكاء الاصطناعي. يتضمن Promptfoo مزوّد cometapi يستدعي CometAPI عبر نقاط نهاية متوافقة مع OpenAI.

المتطلبات الأساسية

Node.js 18+
Promptfoo مثبّت محليًا أو يتم تشغيله عبر npx
حساب CometAPI مع مفتاح API نشط — احصل على مفتاحك من لوحة التحكم
model ID من صفحة نماذج CometAPI

تهيئة التكامل

اضبط مفتاح CometAPI API الخاص بك

اضبط COMETAPI_KEY قبل تشغيل التقييمات:

read -rsp "CometAPI API key: " COMETAPI_KEY
printf '\n'
export COMETAPI_KEY

اختر تنسيق provider

يستخدم Promptfoo تنسيق معرّف provider التالي مع CometAPI:

providers:
  - cometapi:<type>:<model>

استخدم أنواع provider التالية:

Type	Use case
`chat`	Chat Completions وvision وMultimodal Prompts
`completion`	نماذج إكمال النص
`embedding`	تقييمات Text Embeddings
`image`	تقييمات توليد الصور

يمكنك أيضًا استخدام cometapi:your-model-id لوضع chat الافتراضي.

شغّل تقييم CLI

يشغّل الأمر التالي تقييم chat لموجه واحد:

npx promptfoo@latest eval \
  --prompts "Write a concise release note for {{feature}}" \
  --vars feature="a unified API dashboard" \
  -r cometapi:chat:your-model-id

أنشئ ملف إعداد Promptfoo

يقيّم ملف promptfooconfig.yaml التالي نفس Prompt مقابل نموذج CometAPI:

prompts:
  - "Classify this support request: {{message}}"

providers:
  - id: cometapi:chat:your-model-id
    config:
      temperature: 0.2
      max_tokens: 256

tests:
  - vars:
      message: "The API key works locally but fails in production."
    assert:
      - type: contains-any
        value:
          - authentication
          - configuration

شغّل ملف الإعداد باستخدام Promptfoo:

npx promptfoo@latest eval -c promptfooconfig.yaml

أمثلة على provider

استخدم نوع provider يطابق سلوك النموذج الذي تريد تقييمه:

providers:
  - cometapi:chat:your-model-id
  - cometapi:completion:your-model-id
  - cometapi:embedding:your-model-id
  - cometapi:image:your-model-id

بالنسبة لاختبارات Multimodal، أبقِ نوع provider على chat ومرّر متغيرات الصور عبر متغيرات اختبار Promptfoo.

استكشاف الأخطاء وإصلاحها

لا يستطيع Promptfoo العثور على مفتاح API

تأكد من أن COMETAPI_KEY تم تصديره في جلسة shell نفسها التي تشغّل promptfoo eval.

نوع provider لا يطابق النموذج

استخدم chat للنماذج الحوارية وMultimodal، وembedding لنماذج embedding، وimage لنماذج توليد الصور.

فشل model ID

استبدل your-model-id بـ model ID مطابق تمامًا من صفحة نماذج CometAPI.

موارد ذات صلة

ربط Langfuse بـ CometAPI

استخدم AI SDK مع CometAPI

نظرة عامة

وكلاء البرمجة بالذكاء الاصطناعي

وكلاء الذكاء الاصطناعي

عملاء دردشة الذكاء الاصطناعي

الترجمة واللغة

منصات الأتمتة

المراقبة والتقييم

أطر عمل الذكاء الاصطناعي

المتطلبات الأساسية

تهيئة التكامل

أمثلة على provider

استكشاف الأخطاء وإصلاحها

موارد ذات صلة

​المتطلبات الأساسية

​تهيئة التكامل

​أمثلة على provider

​استكشاف الأخطاء وإصلاحها

​موارد ذات صلة

المتطلبات الأساسية

تهيئة التكامل

أمثلة على provider

استكشاف الأخطاء وإصلاحها

موارد ذات صلة