[ISS-16] AGENT_CHAT-claim negeert de productbeperking van het token; de chat faalt pas vaag bij de eerste tool #213

Closed
opened 2026-10-11 10:22:26 +02:00 by janpeter · 0 comments
Owner

Beheerd door Scrum4Me — wijzigingen hier worden overschreven. Bron: https://thuis.jp-visser.nl/issues/cmv3jr357001oe417ot3pyglp

Status: closed (fixed) · Severity: s4_minor · Gemeld door: mac:claude · Occurrences: 1 (laatst: 2026-10-11T08:13:57.547Z) · Aangemaakt: 2026-10-11T08:13:57.547Z

Registratie

Wat er gebeurt

Een HARNESS-worker claimt een AGENT_CHAT-job, ook als het product van die chat buiten de scoped_products van zijn token valt. Bij het claimen bouwt wait_for_job gewoon de payload (src/tools/wait-for-job.ts, tak job.kind === 'AGENT_CHAT', rond regel 1329 op 1fc33f8; buildAgentChatPayload). Pas de eerste doc-tool loopt vast op userCanAccessProduct (src/access.ts:7), met "Product '' not found or not accessible".

Waargenomen (2026-10-11, Scrum4Me /chat)

  • Een chat op Ops Dashboard (cmp43iaoi000h6o7rxklqivl5). Het harness-token agent-harness-local-llm-max2 (api_tokens cmujtqny3000001tg51l7muim) had toen scoped_products {cmuhjw9e80003mt7rq4w3sauu, cmohrysyj0000rd17clnjy4tc}.
  • Job cmv3ilxpz00dxz07rai97i0fz: FAILED met TOO_MANY_TOOL_ERRORS, "3 tool errors exceed maxToolErrors=2".
  • Job cmv3ix66400e1z07ryxpgovtr: DONE, maar het model meldde dat het niets kon nakijken ("Product … not found or not accessible").
  • De gebruiker ziet een vage fout of een onbruikbaar antwoord. Er staat nergens dat het token het product niet mag lezen.

Huidige situatie

JP heeft de beperking van het harness-token weggehaald (scoped_products = '{}'), dus nu treedt het niet op. Zet iemand later weer een beperking op een token dat chatjobs claimt, dan komt het probleem terug.

Mogelijke oplossing

  • In de MCP (voorkeur): bij het claimen van een AGENT_CHAT eerst userCanAccessProduct(job.product_id, worker-user) met de token-scope controleren. Mag het niet, dan meteen afsluiten met een duidelijke code, bijvoorbeeld PRODUCT_OUTSIDE_TOKEN_SCOPE, net zoals AGENT_CHAT_REQUIRES_HARNESS en de skip-route, en zonder modelaanroep.
  • Eventueel daarnaast in de web-app (Scrum4Me): bij "Nieuwe chat" alleen producten aanbieden die een HARNESS-token kan bereiken, of een waarschuwing tonen.
  • Testen: een token met een beperking zonder het product van de chat geeft een terminale job met die code en geen enkele tool-aanroep. Een token zonder beperking werkt zoals nu.

Onderzoek


2026-10-11T10:33:29.754Z — mac:claude

Plan, door JP goedgekeurd op 2026-10-11, zonder ceremonie:

  • Waar: in getFullJobContext, in de AGENT_CHAT-tak (src/tools/wait-for-job.ts), vóór buildAgentChatPayload.
  • Check: getTokenScopedProducts(). Heeft het token een productbeperking zonder het product van de chat, dan volgt een HarnessJobConfigError met de code AGENT_CHAT_PRODUCT_OUT_OF_SCOPE. De job wordt via markJobTerminallyFailed FAILED, zonder payload en zonder modelaanroep.
  • Niet in de claimfilter: dan bleef de job eeuwig op QUEUED staan.
  • Werk: branch fix/iss-16-agent-chat-token-scope vanaf bceba2e. Na de merge volgt de uitrol volgens het MCP-recept, alleen op JP's go.

Oplossing


2026-10-18T10:55:38.395Z — mac:claude

Opgelost in janpeter/scrum4me-mcp#215, merge-commit cd556f2 (2026-10-11). Valt het product van een AGENT_CHAT buiten de scoped_products van het token, dan wordt de job in getFullJobContext meteen FAILED met AGENT_CHAT_PRODUCT_OUT_OF_SCOPE, zonder payload en zonder modelaanroep. Een lege scope werkt zoals eerst.

Live, gecontroleerd op 2026-10-18:

  • de MCP-checkout van de harness op max2 (scrum4me-mcp-stable) stond bij de start van de huidige harness-MCP (2026-10-15 01:55) op 3e5f7a0, en die bevat cd556f2;
  • er bestaan deploy-tags vanaf deploy/main-cd556f2b5f92.

Bewezen met unittests (rood eerst). Een praktijkproef met een token mét beperking is niet gedaan, want het harness-token heeft sinds 2026-10-11 geen beperking.

> Beheerd door Scrum4Me — wijzigingen hier worden overschreven. Bron: https://thuis.jp-visser.nl/issues/cmv3jr357001oe417ot3pyglp Status: closed (fixed) · Severity: s4_minor · Gemeld door: mac:claude · Occurrences: 1 (laatst: 2026-10-11T08:13:57.547Z) · Aangemaakt: 2026-10-11T08:13:57.547Z ## Registratie ## Wat er gebeurt Een HARNESS-worker claimt een AGENT_CHAT-job, ook als het product van die chat buiten de `scoped_products` van zijn token valt. Bij het claimen bouwt `wait_for_job` gewoon de payload (`src/tools/wait-for-job.ts`, tak `job.kind === 'AGENT_CHAT'`, rond regel 1329 op 1fc33f8; `buildAgentChatPayload`). Pas de eerste doc-tool loopt vast op `userCanAccessProduct` (`src/access.ts:7`), met "Product '<id>' not found or not accessible". ## Waargenomen (2026-10-11, Scrum4Me /chat) - Een chat op Ops Dashboard (`cmp43iaoi000h6o7rxklqivl5`). Het harness-token `agent-harness-local-llm-max2` (api_tokens `cmujtqny3000001tg51l7muim`) had toen `scoped_products {cmuhjw9e80003mt7rq4w3sauu, cmohrysyj0000rd17clnjy4tc}`. - Job `cmv3ilxpz00dxz07rai97i0fz`: FAILED met `TOO_MANY_TOOL_ERRORS`, "3 tool errors exceed maxToolErrors=2". - Job `cmv3ix66400e1z07ryxpgovtr`: DONE, maar het model meldde dat het niets kon nakijken ("Product … not found or not accessible"). - De gebruiker ziet een vage fout of een onbruikbaar antwoord. Er staat nergens dat het token het product niet mag lezen. ## Huidige situatie JP heeft de beperking van het harness-token weggehaald (`scoped_products = '{}'`), dus nu treedt het niet op. Zet iemand later weer een beperking op een token dat chatjobs claimt, dan komt het probleem terug. ## Mogelijke oplossing - **In de MCP (voorkeur):** bij het claimen van een AGENT_CHAT eerst `userCanAccessProduct(job.product_id, worker-user)` met de token-scope controleren. Mag het niet, dan meteen afsluiten met een duidelijke code, bijvoorbeeld `PRODUCT_OUTSIDE_TOKEN_SCOPE`, net zoals `AGENT_CHAT_REQUIRES_HARNESS` en de skip-route, en zonder modelaanroep. - **Eventueel daarnaast in de web-app (Scrum4Me):** bij "Nieuwe chat" alleen producten aanbieden die een HARNESS-token kan bereiken, of een waarschuwing tonen. - **Testen:** een token met een beperking zonder het product van de chat geeft een terminale job met die code en geen enkele tool-aanroep. Een token zonder beperking werkt zoals nu. ## Onderzoek --- *2026-10-11T10:33:29.754Z — mac:claude* Plan, door JP goedgekeurd op 2026-10-11, zonder ceremonie: - **Waar:** in `getFullJobContext`, in de AGENT_CHAT-tak (`src/tools/wait-for-job.ts`), vóór `buildAgentChatPayload`. - **Check:** `getTokenScopedProducts()`. Heeft het token een productbeperking zonder het product van de chat, dan volgt een `HarnessJobConfigError` met de code `AGENT_CHAT_PRODUCT_OUT_OF_SCOPE`. De job wordt via `markJobTerminallyFailed` FAILED, zonder payload en zonder modelaanroep. - **Niet in de claimfilter:** dan bleef de job eeuwig op QUEUED staan. - **Werk:** branch `fix/iss-16-agent-chat-token-scope` vanaf `bceba2e`. Na de merge volgt de uitrol volgens het MCP-recept, alleen op JP's go. ## Oplossing --- *2026-10-18T10:55:38.395Z — mac:claude* Opgelost in janpeter/scrum4me-mcp#215, merge-commit cd556f2 (2026-10-11). Valt het product van een AGENT_CHAT buiten de `scoped_products` van het token, dan wordt de job in `getFullJobContext` meteen FAILED met `AGENT_CHAT_PRODUCT_OUT_OF_SCOPE`, zonder payload en zonder modelaanroep. Een lege scope werkt zoals eerst. Live, gecontroleerd op 2026-10-18: - de MCP-checkout van de harness op max2 (`scrum4me-mcp-stable`) stond bij de start van de huidige harness-MCP (2026-10-15 01:55) op 3e5f7a0, en die bevat cd556f2; - er bestaan deploy-tags vanaf `deploy/main-cd556f2b5f92`. Bewezen met unittests (rood eerst). Een praktijkproef met een token mét beperking is niet gedaan, want het harness-token heeft sinds 2026-10-11 geen beperking. <!-- s4m:issue:cmv3jr357001oe417ot3pyglp -->
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
janpeter/scrum4me-mcp#213
No description provided.