Hop til hovedindhold

Send til kvalitetskontrol

Sådan sender du en version af din agent til menneskelig kvalitetskontrol — det første af de to trin, der gør en agent til en app i Galleriet.

Adgang

  • Udvikler, Administrator: Kan indsende agenter (og skal have redigeringsadgang til agenten)

Hvor det sker

Indsendelsen ligger nederst på Udgivelsessiden — ikke i editoren. Editorens knap Udgivelse gemmer agenten og fører dig derhen, og det er med vilje: en indsendelse fryser konfigurationen med, så du skal have set den, før du sender.

Send til kvalitetskontrol

Trin for trin

1. Åbn Udgivelse

Klik Udgivelse i editorens værktøjslinje (eller på agentens detaljeside). Knappen gemmer dine ændringer først.

2. Sæt kontrakten op

Vælg hvilke inputs og outputs andre skal se, og udfyld vejledningen. Se Udgivelsessiden.

3. Udfyld indsendelsens felter

I sektionen Send til kvalitetskontrol:

  • Versionsnavn (valgfrit): et navn til netop denne indsendelse. Vises sammen med versionen i kvalitetskontrollen
  • Udgivelsesnoter (valgfrit): hvad der er nyt eller ændret

Begge felter er forudfyldt med et forslag fra AgentBase, markeret med chippen Forslag. Ret dem frit — eller slet dem, de er valgfrie.

4. Tjek testene, der følger med

Under felterne står Tests i kvalitetskontrollen: en liste over agentens tests. Det er en kvittering, ikke en udvælgelse — du skal ikke vælge noget.

Listen markerer de tests, der ikke er klar:

MarkeringBetydning
Ikke kørt endnuTesten er oprettet, men aldrig kørt — testeren skal selv køre den
Kørt på en ældre versionKør den igen, før du indsender, så bedømmelsen passer til versionen
Kører…En kørsel er i gang

Har agenten ingen tests, tilbyder sektionen Foreslå 3 tests: AgentBase læser agentens inputs, foreslår tre realistiske tests og opretter dem. De bliver agentens egne tests og følger automatisk med — kvalitetskontrollen kører dem.

5. Klik "Send til kvalitetskontrol"

Konfigurationen gemmes, og den gemte version fryses som et uforanderligt øjebliksbillede. Det er den, anmelderen bedømmer — så du kan roligt bygge videre imens.

Du sendes videre til agentens arbejdsrum i kvalitetskontrollen.

Én fælles testsuite

Der er intet at vælge og intet at få tilbage

Agentens tests findes ét sted: under Kørsler i editoren. De er anmelderens referencetests. Der er ingen udvælgelse ved indsendelsen, ingen overførsel, og testene forlader ikke dine kørsler. Retter du en test i editoren, gælder rettelsen også i kvalitetskontrollen.

Det gælder hele vejen rundt:

  • Trækker du indsendelsen tilbage, bliver testene, hvor de er
  • Indsender du en ny version, følger testene med, som de står — det er de samme, kvalitetskontrollen allerede har
  • Bliver versionen afvist, bliver testene, hvor de er. Det er dem, afvisningsrapporten beder dig rette

Efter indsendelse

  • Status ændres til Indsendt
  • Anmeldere kan se indsendelsen i kvalitetskontrollen og i køen på /reviews
  • Du kan bygge videre i editoren — den frosne version ændrer sig ikke
  • Over listen under Kørsler står, at en anmelder har versionen, med Indsend ny version og ikonknapperne Se i kvalitetskontrol og Træk tilbage

Indsend en ny version

Er der allerede en indsendelse under gennemgang, hedder sektionen Indsend ny version. Den nye indsendelse erstatter den, der ligger til gennemgang:

  • Der fryses et nyt øjebliksbillede, som anmelderen bedømmer i stedet
  • Testene følger med, som de står
  • Linket Åbn gennemgangen fører direkte til den første test, der mangler en bedømmelse

Træk indsendelsen tilbage

Vil du have versionen tilbage, før den er bedømt:

  1. Åbn agenten i editoren og klik på Kørsler i dokken ved hubben i bunden af lærredet (eller tryk T)
  2. Klik ikonknappen Træk tilbage over listen over kørsler — eller brug Træk tilbage på agentens detaljeside

Træk tilbage

Du bliver spurgt først: "Versionen går tilbage til kladde, og kvalitetskontrollen stopper gennemgangen. Dine tests bliver, hvor de er - under Kørsler i editoren. Du kan indsende igen, når du er klar."

Begrænsninger

  • Kræver redigeringsadgang til agenten
  • Kan kun bruges, mens indsendelsen er under gennemgang — ikke efter en afgørelse

Efter en afvisning

Bliver versionen afvist:

  • Agenten vender tilbage til Kladde, og pillen viser Afvist i kvalitetskontrol
  • Under Kørsler i editoren står Se afvisningsrapport over listen. Rapporten viser anmelderens begrundelse, og for hvert fejlet output den brugte input, det producerede output og anmelderens note. Knappen Ret det med assistenten skifter til Chat og giver assistenten afvisningen som opgave
  • Send til kvalitetskontrol er låst, indtil du har gemt en reel ændring af agenten. En identisk genindsendelse ville ramme den samme afviste version igen

Relaterede sider