← Vissza a katalógushoz
Ellis portréja

Agent · 1.0.0 verzió

Ellis

AI-értékelési és kiadási specialista

Javasolt elsődleges modell:

GPT Astra (legújabb)

Hozzárendelt skillek: 7

Ellis vagyok, és megismételhető ellenőrzésekké alakítom az AI-minőséggel kapcsolatos elvárásaidat, hogy eldönthesd, kiadásra kész-e egy megváltozott modell, utasítás vagy teljes munkafolyamat.

Ellis skilljei

Ismerd meg az ügynök saját skilljeit, és nézd meg, melyik miben segít neked.

AI-értékelés és kiadási feltételek

Valós feladatok, súlyozott hibák és megismételhető minőségi, költség- és időfeltételek alapján értékeli az AI-változtatásokat.

ai-evaluation-release-gates

Csomagban lévő fájlok 1
  • SKILL.md

LLM-értékelés és megfigyelhetőség

Végrehajtási nyomot célzott értékeléshez és újrahasználható regressziós bizonyítékhoz kapcsolva teszi vizsgálhatóvá az LLM minőségét és hibáját.

llm-eval-observability

Csomagban lévő fájlok 1
  • SKILL.md

Tulajdonságtesztek ellenőrzése

Független elvárással, érdemi generált esettel és ismert hibára való érzékenységgel ellenőrzi a tulajdonságtesztek hitelességét.

test-oracle-generator-validation

Csomagban lévő fájlok 1
  • SKILL.md

Kockázatalapú teszttervezés

A lehetséges hiba hatása és valószínűsége szerint osztja el a tesztelési erőfeszítést.

risk-based-testing

Csomagban lévő fájlok 2
  • LICENSE.txt
  • SKILL.md

Technikai bizonyítékok minősítése

Megkülönbözteti a dokumentált állítást, kódban igazolt működést, lefuttatott kísérletet és következtetést.

evidence-grading-research-verification

Csomagban lévő fájlok 1
  • SKILL.md

Teljesítménymérések elemzése

Késleltetésből, tényleges terhelésből és szerveradatból magyarázza a szűk keresztmetszetet.

performance-measurement-analysis

Csomagban lévő fájlok 1
  • SKILL.md

Telepítés ellenőrzése és helyreállítás

A tényleges futtatási környezetben ellenőrzi a kiadást, és az adat-, illetve sémahatásokat figyelembe vevő helyreállítást választ.

deployment-verification-recovery

Csomagban lévő fájlok 1
  • SKILL.md

Bemutatkozás

Részletek… Összecsukás

Ellis

Ellis vagyok, és megismételhető ellenőrzésekké alakítom az AI-minőséggel kapcsolatos elvárásaidat, hogy eldönthesd, kiadásra kész-e egy megváltozott modell, utasítás vagy teljes munkafolyamat.

Valódi feladataidból értékelési adathalmazokat készítek, és meghatározom, mit tekintünk sikernek vagy hibának. Verziókat hasonlítok össze, visszaeséseket vizsgálok, és olyan kiadási feltételeket adok, amelyek láthatóvá teszik a minőségi kompromisszumokat a csapatodnak.

Előfeltételek

  • A számítógépedre telepített Orqestria.
  • Az ügynök futtatásához egy beállított, bejelentkezett támogatott modellszolgáltató.