AI-értékelés és kiadási feltételek
Valós feladatok, súlyozott hibák és megismételhető minőségi, költség- és időfeltételek alapján értékeli az AI-változtatásokat.
ai-evaluation-release-gates
Csomagban lévő fájlok 1
SKILL.md
← Vissza a katalógushoz
Ellis
AI-értékelési és kiadási specialista
Javasolt elsődleges modell:
GPT Astra (legújabb)
Hozzárendelt skillek: 7
Ellis vagyok, és megismételhető ellenőrzésekké alakítom az AI-minőséggel kapcsolatos elvárásaidat, hogy eldönthesd, kiadásra kész-e egy megváltozott modell, utasítás vagy teljes munkafolyamat.
Ellis skilljei
Ismerd meg az ügynök saját skilljeit, és nézd meg, melyik miben segít neked.
LLM-értékelés és megfigyelhetőség
Végrehajtási nyomot célzott értékeléshez és újrahasználható regressziós bizonyítékhoz kapcsolva teszi vizsgálhatóvá az LLM minőségét és hibáját.
llm-eval-observability
Csomagban lévő fájlok 1
SKILL.md
Tulajdonságtesztek ellenőrzése
Független elvárással, érdemi generált esettel és ismert hibára való érzékenységgel ellenőrzi a tulajdonságtesztek hitelességét.
test-oracle-generator-validation
Csomagban lévő fájlok 1
SKILL.md
Kockázatalapú teszttervezés
A lehetséges hiba hatása és valószínűsége szerint osztja el a tesztelési erőfeszítést.
risk-based-testing
Csomagban lévő fájlok 2
LICENSE.txtSKILL.md
Technikai bizonyítékok minősítése
Megkülönbözteti a dokumentált állítást, kódban igazolt működést, lefuttatott kísérletet és következtetést.
evidence-grading-research-verification
Csomagban lévő fájlok 1
SKILL.md
Teljesítménymérések elemzése
Késleltetésből, tényleges terhelésből és szerveradatból magyarázza a szűk keresztmetszetet.
performance-measurement-analysis
Csomagban lévő fájlok 1
SKILL.md
Telepítés ellenőrzése és helyreállítás
A tényleges futtatási környezetben ellenőrzi a kiadást, és az adat-, illetve sémahatásokat figyelembe vevő helyreállítást választ.
deployment-verification-recovery
Csomagban lévő fájlok 1
SKILL.md
Bemutatkozás
Összecsukás
Ellis
Ellis vagyok, és megismételhető ellenőrzésekké alakítom az AI-minőséggel kapcsolatos elvárásaidat, hogy eldönthesd, kiadásra kész-e egy megváltozott modell, utasítás vagy teljes munkafolyamat.
Valódi feladataidból értékelési adathalmazokat készítek, és meghatározom, mit tekintünk sikernek vagy hibának. Verziókat hasonlítok össze, visszaeséseket vizsgálok, és olyan kiadási feltételeket adok, amelyek láthatóvá teszik a minőségi kompromisszumokat a csapatodnak.
Előfeltételek
- Olyan Orqestria-verzió, amely támogatja a bővítménykatalógus csomagjainak importálását.
- Legalább egy beállított és hitelesített támogatott CLI: Claude Code, Codex vagy Antigravity. A szolgáltatói hozzáférés és használat nincs a csomagban.
- Csak az általad engedélyezett projektfájlok és külső szolgáltatások érhetők el. A termékspecifikus fiókok, infrastruktúra, előfizetések és API-kulcsok nincsenek a csomagban.
- Használat előtt nézd át az import előnézetét és az importált skillek megbízhatóságát. A csomag importálása nem élesít szoftvert, nem hoz létre szolgáltatásokat és nem futtat segédscripteket.