AnythingLLM
מדריך אינטגרציה של AnythingLLM
חברו את Routerah אל AnythingLLM כספק Generic OpenAI.
סקירה כללית
AnythingLLM מתייחס אל Routerah כספק Generic OpenAI. הקלידו את המודל, הגדירו את חלון ההקשר ושמרו.
הגדרה מהירה
הדביקו את אלה בלקוח. המפתח שלכם ממולא אוטומטית כשאתם מחוברים.
text
כתובת URL בסיסית: https://api.routerah.app/v1
מפתח API: YOUR_API_KEYתאימות
Chat Completionsהזרמהקריאת כלים
הגדרה שלב אחר שלב
- 1פתחו את LLM Preference
פתחו Settings בסרגל הצד, ואז LLM Preference.
- 2בחרו Generic OpenAI
הגדירו את LLM Provider לערך Generic OpenAI ומלאו את הטופס. ברירת המחדל של Max Tokens היא 1024 והיא מגבילה כל תשובה, לכן העלו אותה.
textBase URL: https://api.routerah.app/v1 API Key: YOUR_API_KEY Chat Model Name: YOUR_MODEL_ID Model context window: 50000 Max Tokens: 8192 - 3שמרו
שמרו. AnythingLLM משתמש ב-Routerah עבור סביבות עבודה של שיחות.
מודלים מומלצים
מודלים חינמיים שעובדים כאן. הדביקו כל מזהה מודל בלקוח.
minimax-m3.1-flash:freexing4.0-29b-a4b:freesage-a1.5:freenemotron-3.5-bolt-e4b:freeling-3.1-flash:free
נקודות לתשומת לב
- לאחר הגדרת Base URL ו-API Key, Generic OpenAI מושך את קטלוג הדגמים. אם המשיכה נכשלת, השדה הופך לתיבת טקסט, ואז יש להקליד את מזהה הדגם ידנית.
- Embedding Preference הוא לשונית נפרדת. השאירו אותה על ספק הטמעות שעובד, אלא אם Routerah חושף הטמעות בתוכנית שלכם.