[ISS-5] Dispatch-reviewer kan vitest niet draaien: /tmp in het kind is noexec #122

Closed
opened 2026-10-08 23:07:19 +02:00 by janpeter · 0 comments
Owner

Beheerd door Scrum4Me — wijzigingen hier worden overschreven. Bron: https://thuis.jp-visser.nl/issues/cmv00sh570027p717k3khddfb

Status: closed (fixed) · Severity: s3_major · Gemeld door: mac:claude · Occurrences: 1 (laatst: 2026-10-08T20:59:51.115Z) · Aangemaakt: 2026-10-08T20:59:51.115Z

Registratie

Waarneming

De s4m-codex-reviewer meldt bij reviews van scrum4me-docker (#118 op 2026-10-08, #120 op 2026-10-08) steeds dezelfde verificatiebeperking. Typecheck lukt, maar Vitest start niet, want "/tmp weigert uitvoering" en de native rolldown-module laadt niet. Bij #118 draaide de reviewer de suite met een geheugenbestand-workaround: 51 failures, identiek aan de basiscommit, deels door teststubs die niet uitgevoerd mogen worden.

Gevolg: reviews beoordelen de tests alleen inhoudelijk en kiezen COMMENT in plaats van APPROVE. Het DoD-criterium "de suite is groen" wordt nooit onafhankelijk bevestigd.

Waarschijnlijke oorzaak

buildContainerArgs (lib/dispatch-runtime.ts:68) geeft het kind --tmpfs /tmp:rw,nosuid,nodev,size=256m. Docker zet bij --tmpfs standaard noexec, tenzij exec expliciet in de opties staat. Native modules en uitvoerbare teststubs die naar /tmp worden uitgepakt of daar gemaakt, falen dan.

Te onderzoeken

  • Is exec op de /tmp-tmpfs van het kind aanvaardbaar? De rootfs is readonly, er zijn geen capabilities en no-new-privileges staat aan. /work is al beschrijfbaar, maar of daar exec mag verschilt per toegangsmodus. Een alternatief is TMPDIR naar een exec-mount laten wijzen.
  • Zijn 256 MB genoeg voor een npm ci plus vitest-run, of moet dat groter? Dat telt mee voor de memcg.
  • De proef: in een review-slot npx vitest run laten draaien op een repo met native deps (rolldown).

Geen secrets.

Onderzoek


2026-10-08T21:02:20.637Z — mac:claude

Derde keer waargenomen op 2026-10-08, bij de review van scrum4me-docker#121. Vitest faalt daar met "failed to map segment from shared object" (de native binding), en esbuild met EACCES op /tmp.


2026-10-08T21:24:51.774Z — mac:claude

Onderzoek 2026-10-08 (mac:claude)

Oorzaak bevestigd. buildContainerArgs (lib/dispatch-runtime.ts:68) zet --tmpfs /tmp:rw,nosuid,nodev,size=256m zonder exec, en Docker maakt een tmpfs dan standaard noexec.

Het is geen beveiligingsgrens. /output (altijd 0777 voor het kind) en /work zijn bind-mounts zonder noexec. Het kind kan daar nu al bestanden schrijven en uitvoeren. noexec op /tmp breekt dus alleen tooling.

Profiel op scrum4me-srv (beide review-slots, /run/config/dispatch-profile.json): access read, memory_mb 2048, cpu_millis 2000, pids_limit 512, max_duration_seconds 1800. De /tmp-tmpfs telt mee binnen die 2048 MB.

Proef (node:22-bookworm met de flags van het kind: --read-only --cap-drop ALL --security-opt no-new-privileges --user 10001:10001, HOME=/tmp/home, scrum4me-docker gekopieerd naar /tmp/w):

/tmp-opties npm ci vitest /tmp gebruikt
rw,nosuid,nodev,size=256m (nu) faalt start niet 31 MB
rw,exec,nosuid,nodev,size=256m ok 1313 geslaagd, 5 gefaald, 10 overgeslagen 112 MB

De 5 failures heb ik niet geanalyseerd. Waarschijnlijk komen ze door de omgeving: een kopie zonder .git, geen docker. In het echte kind is /work een git-checkout.

Grootte. 256 MB is genoeg voor scrum4me-docker (112 MB). Voor grotere repo's (scrum4me-mcp, Scrum4Us) is dat nog niet gemeten; een grotere tmpfs gaat ten koste van het geheugen van het kind.


2026-10-08T21:30:08.594Z — mac:claude

Besluit JP: alleen exec, de grootte blijft 256 MB. Fix gecommit op branch fix/iss5-child-tmp-exec (37c9d0b, nog niet gepusht): --tmpfs /tmp:rw,exec,nosuid,nodev,size=256m in buildContainerArgs, met een test en een alinea in de operator-doc. typecheck:dispatch groen; suite 1305 geslaagd, 2 gefaald (de bekende macOS-only failures).

Het issue sluit na de deploy van de broker- en runtime-code op scrum4me-srv, met als bewijs een review die vitest wél draait. De grootte meten we dan bij een grotere repo (scrum4me-mcp, Scrum4Us).


2026-10-08T21:42:33.324Z — mac:claude

PR geopend: #123 (fix/iss5-child-tmp-exec → master).


2026-10-08T21:58:12.586Z — mac:claude

#123 is gemerged; review COMMENT met 0 blockers. De reviewer kon vitest nog niet draaien: dat is verwacht, want de fix draait pas na de deploy. Hij meldde ook dat zijn clone vendor/scrum4me-shared mist, waardoor de typecheck daar niet groen werd. Bij eerdere reviews initialiseerde hij die submodule wel. Dat is een aandachtspunt voor de reviewer-setup, niet voor deze fix. Het issue sluit na de deploy van broker en runtime op scrum4me-srv en een review die vitest echt draait.


2026-10-09T06:14:42.386Z — mac:claude

Deploy gecontroleerd op 2026-10-09: de broker-checkout staat op fc1ce31 (rw,exec,nosuid in dispatch-runtime.ts) en beide brokers zijn herstart om 05:32 CEST. Er heeft nog geen review-dispatch gedraaid; sluiten na een review die vitest echt draait.


2026-10-09T06:45:46.679Z — mac:claude

Correctie op de diagnose (2026-10-09, mac:claude)

De PR-reviews van s4m-codex-reviewer lopen níet via dispatch, maar als PR_REVIEW-job in de legacy agent-codex-worker; de run-logs van agent-codex op srv van 08-10 21:07/22:01 en 09-10 05:31 vallen samen met de reviews van #121 en #123. Die container heeft /tmp als tmpfs size=2g,mode=1777, zonder exec, dus ook noexec. worker-idea heeft hetzelfde. De gemergde fix (#123, de dispatch-child-tmpfs) is correct maar raakt de PR-reviewer niet.

Bovendien draaide een dispatch-review (b749f8d5, CODEX) vitest bewust niet. Het review-prompt staat schrijven alleen in /output toe, en het kind heeft geen netwerk voor npm ci. Het exec-recht in het dispatch-kind wordt in een review dus niet gebruikt.

Echte fix-richting voor de PR-reviewer: de legacy worker. Opties:

  • exec op /tmp in de compose van de hosts: docker-compose.yml:58 in de repo als referentie, de echte staat in /srv/scrum4me/compose;
  • TMPDIR voor PR_REVIEW naar een exec-mount zoals /home/agent of AGENT_REPO_CACHE, zoals M19 al deed voor DOCS_AUDIT.

Nog niet gekozen.


2026-10-09T06:56:18.084Z — mac:claude

Besluit JP (2026-10-09): optie b. Fix op branch fix/iss5-pr-review-tmpdir (6fe5a72, nog niet gepusht):

  • lib/job-tmp.ts, met de wiring in bin/run-one-job.ts: voor PR_REVIEW-jobs maakt de runner /home/agent/.scrum4me-tmp/<job> aan (disk-volume, exec, 0700), zet TMPDIR in de env van het kind en voegt een prompt-sectie "Werkruimte voor kopieën en tests" toe;
  • na de job ruimt de runner de map op; restanten van een crash verdwijnen bij de volgende runner-start.

Proef met de /tmp-flags van de worker (size=2g,mode=1777, dus noexec), read-only rootfs, cap-drop ALL: een kopie in /tmp laat npm ci falen; onder TMPDIR op een exec-volume slaagt npm ci en draait vitest (17/17).

Unit-tests job-tmp 4/4. Volledige suite: 1320 geslaagd, 2 gefaald (de bekende macOS-only failures).


2026-10-09T06:57:28.785Z — mac:claude

PR geopend: #124 (fix/iss5-pr-review-tmpdir → master). Sluiten na merge, een rebuild en recreate van agent-codex/worker-idea op beide hosts, en een PR-review die vitest draait.


2026-10-09T07:06:35.550Z — mac:claude

#124 gemerged (2026-10-09); CI groen, review COMMENT met 0 blockers. Nog open: een rebuild en recreate van agent-codex en worker-idea op scrum4me-srv en max2, en een PR-review die vitest draait.


2026-10-09T07:46:01.628Z — mac:claude

Deploy #124 (job-tmp voor PR_REVIEW) uitgerold 2026-10-09 via Dashboard-flows (scrum4me-docker master f62e4ef). scrum4me-srv: worker-idea recreated 07:42Z, agent-codex 07:44Z; max2: worker-idea + agent-codex 07:44Z. Alle zes containers bevatten /opt/agent/lib/job-tmp.ts, de healthchecks zijn groen en AGENT_TESTDB_PRODUCTS staat in de env. Proef in agent-codex op beide hosts: een uitvoerbaar script onder /home/agent/.scrum4me-tmp/ draait (exec-ok). Nog open: een echte PR_REVIEW-job die vitest onder $TMPDIR draait.


2026-10-09T07:50:50.989Z — mac:claude

Runtime-bewijs 2026-10-09: PR_REVIEW-job cmv0nye6u000n6f17628y6jud (handmatig via dispatch_job op de gemergde scrum4me-docker#124) is geclaimd door agent-codex op max2.

  • Runner-log: job-tmp prepared dir=/home/agent/.scrum4me-tmp/cmv0nye6u000n6f17628y6jud.
  • De reviewer kloonde de repo naar $TMPDIR/repo; npm ci --ignore-scripts slaagde (52 packages).
  • De eerste npm test gaf 20 rode files met 391/391 tests groen; die files vielen vermoedelijk om op de nog niet geïnitialiseerde submodule. Na git submodule update --init slaagde npm test: 88/88 files, 1326 tests geslaagd en 8 overgeslagen. typecheck:dispatch was groen.
  • post_pr_review gaf APPROVED, met de vitest-telling in de body. De job eindigde met exit 0 en de job-tmp-map was daarna weg.

Oplossing


2026-10-09T07:51:22.660Z — mac:claude

Opgelost in de legacy worker: scrum4me-docker#124. PR_REVIEW-jobs krijgen een uitvoerbare scratch-map per job op het disk-volume (/home/agent/.scrum4me-tmp/<job>). De runner zet TMPDIR daarheen en neemt in het prompt een sectie op die het gebruik ervan voorschrijft; na de job ruimt hij de map op en bij de start veegt hij restanten op. De fix in het dispatch-kind (#123, /tmp exec) blijft staan, maar raakte de PR-reviewer niet.

Uitgerold op 2026-10-09 via de Dashboard-flows op scrum4me-srv en max2. Runtime-bewijs: job cmv0nye6u000n6f17628y6jud. De reviewer kloonde de repo naar $TMPDIR, npm ci slaagde en de vitest-suite slaagde (1326 geslaagd, 8 overgeslagen). De review was APPROVED en de map was na de job verwijderd.

> Beheerd door Scrum4Me — wijzigingen hier worden overschreven. Bron: https://thuis.jp-visser.nl/issues/cmv00sh570027p717k3khddfb Status: closed (fixed) · Severity: s3_major · Gemeld door: mac:claude · Occurrences: 1 (laatst: 2026-10-08T20:59:51.115Z) · Aangemaakt: 2026-10-08T20:59:51.115Z ## Registratie ## Waarneming De `s4m-codex-reviewer` meldt bij reviews van scrum4me-docker (#118 op 2026-10-08, #120 op 2026-10-08) steeds dezelfde verificatiebeperking. Typecheck lukt, maar **Vitest start niet**, want "`/tmp` weigert uitvoering" en de native rolldown-module laadt niet. Bij #118 draaide de reviewer de suite met een geheugenbestand-workaround: 51 failures, identiek aan de basiscommit, deels door teststubs die niet uitgevoerd mogen worden. Gevolg: reviews beoordelen de tests alleen inhoudelijk en kiezen COMMENT in plaats van APPROVE. Het DoD-criterium "de suite is groen" wordt nooit onafhankelijk bevestigd. ## Waarschijnlijke oorzaak `buildContainerArgs` (`lib/dispatch-runtime.ts:68`) geeft het kind `--tmpfs /tmp:rw,nosuid,nodev,size=256m`. Docker zet bij `--tmpfs` standaard **`noexec`**, tenzij `exec` expliciet in de opties staat. Native modules en uitvoerbare teststubs die naar `/tmp` worden uitgepakt of daar gemaakt, falen dan. ## Te onderzoeken - Is `exec` op de `/tmp`-tmpfs van het kind aanvaardbaar? De rootfs is readonly, er zijn geen capabilities en `no-new-privileges` staat aan. `/work` is al beschrijfbaar, maar of daar exec mag verschilt per toegangsmodus. Een alternatief is `TMPDIR` naar een exec-mount laten wijzen. - Zijn 256 MB genoeg voor een `npm ci` plus vitest-run, of moet dat groter? Dat telt mee voor de memcg. - De proef: in een review-slot `npx vitest run` laten draaien op een repo met native deps (rolldown). Geen secrets. ## Onderzoek --- *2026-10-08T21:02:20.637Z — mac:claude* Derde keer waargenomen op 2026-10-08, bij de review van scrum4me-docker#121. Vitest faalt daar met "failed to map segment from shared object" (de native binding), en esbuild met EACCES op `/tmp`. --- *2026-10-08T21:24:51.774Z — mac:claude* ## Onderzoek 2026-10-08 (mac:claude) **Oorzaak bevestigd.** `buildContainerArgs` (`lib/dispatch-runtime.ts:68`) zet `--tmpfs /tmp:rw,nosuid,nodev,size=256m` zonder `exec`, en Docker maakt een tmpfs dan standaard `noexec`. **Het is geen beveiligingsgrens.** `/output` (altijd 0777 voor het kind) en `/work` zijn bind-mounts zonder `noexec`. Het kind kan daar nu al bestanden schrijven en uitvoeren. `noexec` op `/tmp` breekt dus alleen tooling. **Profiel op scrum4me-srv** (beide review-slots, `/run/config/dispatch-profile.json`): access `read`, `memory_mb` 2048, `cpu_millis` 2000, `pids_limit` 512, `max_duration_seconds` 1800. De `/tmp`-tmpfs telt mee binnen die 2048 MB. **Proef** (`node:22-bookworm` met de flags van het kind: `--read-only --cap-drop ALL --security-opt no-new-privileges --user 10001:10001`, `HOME=/tmp/home`, scrum4me-docker gekopieerd naar `/tmp/w`): | `/tmp`-opties | `npm ci` | vitest | `/tmp` gebruikt | |---|---|---|---| | `rw,nosuid,nodev,size=256m` (nu) | **faalt** | start niet | 31 MB | | `rw,exec,nosuid,nodev,size=256m` | ok | 1313 geslaagd, 5 gefaald, 10 overgeslagen | 112 MB | De 5 failures heb ik niet geanalyseerd. Waarschijnlijk komen ze door de omgeving: een kopie zonder `.git`, geen docker. In het echte kind is `/work` een git-checkout. **Grootte.** 256 MB is genoeg voor scrum4me-docker (112 MB). Voor grotere repo's (scrum4me-mcp, Scrum4Us) is dat nog niet gemeten; een grotere tmpfs gaat ten koste van het geheugen van het kind. --- *2026-10-08T21:30:08.594Z — mac:claude* Besluit JP: alleen `exec`, de grootte blijft 256 MB. Fix gecommit op branch `fix/iss5-child-tmp-exec` (37c9d0b, nog niet gepusht): `--tmpfs /tmp:rw,exec,nosuid,nodev,size=256m` in `buildContainerArgs`, met een test en een alinea in de operator-doc. typecheck:dispatch groen; suite 1305 geslaagd, 2 gefaald (de bekende macOS-only failures). Het issue sluit na de deploy van de broker- en runtime-code op scrum4me-srv, met als bewijs een review die vitest wél draait. De grootte meten we dan bij een grotere repo (scrum4me-mcp, Scrum4Us). --- *2026-10-08T21:42:33.324Z — mac:claude* PR geopend: https://git.jp-visser.nl/janpeter/scrum4me-docker/pulls/123 (`fix/iss5-child-tmp-exec` → `master`). --- *2026-10-08T21:58:12.586Z — mac:claude* #123 is gemerged; review COMMENT met 0 blockers. De reviewer kon vitest nog niet draaien: dat is verwacht, want de fix draait pas na de deploy. Hij meldde ook dat zijn clone `vendor/scrum4me-shared` mist, waardoor de typecheck daar niet groen werd. Bij eerdere reviews initialiseerde hij die submodule wel. Dat is een aandachtspunt voor de reviewer-setup, niet voor deze fix. Het issue sluit na de deploy van broker en runtime op scrum4me-srv en een review die vitest echt draait. --- *2026-10-09T06:14:42.386Z — mac:claude* Deploy gecontroleerd op 2026-10-09: de broker-checkout staat op `fc1ce31` (`rw,exec,nosuid` in `dispatch-runtime.ts`) en beide brokers zijn herstart om 05:32 CEST. Er heeft nog geen review-dispatch gedraaid; sluiten na een review die vitest echt draait. --- *2026-10-09T06:45:46.679Z — mac:claude* ## Correctie op de diagnose (2026-10-09, mac:claude) **De PR-reviews van `s4m-codex-reviewer` lopen níet via dispatch**, maar als PR_REVIEW-job in de legacy `agent-codex`-worker; de run-logs van agent-codex op srv van 08-10 21:07/22:01 en 09-10 05:31 vallen samen met de reviews van #121 en #123. Die container heeft `/tmp` als tmpfs `size=2g,mode=1777`, zonder `exec`, dus ook **noexec**. `worker-idea` heeft hetzelfde. De gemergde fix (#123, de dispatch-child-tmpfs) is correct maar raakt de PR-reviewer niet. Bovendien draaide een dispatch-review (b749f8d5, CODEX) vitest bewust niet. Het review-prompt staat schrijven alleen in `/output` toe, en het kind heeft geen netwerk voor `npm ci`. Het `exec`-recht in het dispatch-kind wordt in een review dus niet gebruikt. Echte fix-richting voor de PR-reviewer: de legacy worker. Opties: - `exec` op `/tmp` in de compose van de hosts: `docker-compose.yml:58` in de repo als referentie, de echte staat in `/srv/scrum4me/compose`; - `TMPDIR` voor PR_REVIEW naar een exec-mount zoals `/home/agent` of `AGENT_REPO_CACHE`, zoals M19 al deed voor DOCS_AUDIT. Nog niet gekozen. --- *2026-10-09T06:56:18.084Z — mac:claude* Besluit JP (2026-10-09): optie b. Fix op branch `fix/iss5-pr-review-tmpdir` (6fe5a72, nog niet gepusht): - `lib/job-tmp.ts`, met de wiring in `bin/run-one-job.ts`: voor PR_REVIEW-jobs maakt de runner `/home/agent/.scrum4me-tmp/<job>` aan (disk-volume, exec, 0700), zet `TMPDIR` in de env van het kind en voegt een prompt-sectie "Werkruimte voor kopieën en tests" toe; - na de job ruimt de runner de map op; restanten van een crash verdwijnen bij de volgende runner-start. Proef met de `/tmp`-flags van de worker (`size=2g,mode=1777`, dus noexec), read-only rootfs, `cap-drop ALL`: een kopie in `/tmp` laat `npm ci` falen; onder `TMPDIR` op een exec-volume slaagt `npm ci` en draait vitest (17/17). Unit-tests job-tmp 4/4. Volledige suite: 1320 geslaagd, 2 gefaald (de bekende macOS-only failures). --- *2026-10-09T06:57:28.785Z — mac:claude* PR geopend: https://git.jp-visser.nl/janpeter/scrum4me-docker/pulls/124 (`fix/iss5-pr-review-tmpdir` → `master`). Sluiten na merge, een rebuild en recreate van `agent-codex`/`worker-idea` op beide hosts, en een PR-review die vitest draait. --- *2026-10-09T07:06:35.550Z — mac:claude* #124 gemerged (2026-10-09); CI groen, review COMMENT met 0 blockers. Nog open: een rebuild en recreate van `agent-codex` en `worker-idea` op scrum4me-srv en max2, en een PR-review die vitest draait. --- *2026-10-09T07:46:01.628Z — mac:claude* Deploy #124 (job-tmp voor PR_REVIEW) uitgerold 2026-10-09 via Dashboard-flows (scrum4me-docker master f62e4ef). scrum4me-srv: worker-idea recreated 07:42Z, agent-codex 07:44Z; max2: worker-idea + agent-codex 07:44Z. Alle zes containers bevatten `/opt/agent/lib/job-tmp.ts`, de healthchecks zijn groen en `AGENT_TESTDB_PRODUCTS` staat in de env. Proef in agent-codex op beide hosts: een uitvoerbaar script onder `/home/agent/.scrum4me-tmp/` draait (`exec-ok`). Nog open: een echte PR_REVIEW-job die vitest onder `$TMPDIR` draait. --- *2026-10-09T07:50:50.989Z — mac:claude* Runtime-bewijs 2026-10-09: PR_REVIEW-job cmv0nye6u000n6f17628y6jud (handmatig via dispatch_job op de gemergde scrum4me-docker#124) is geclaimd door agent-codex op max2. - Runner-log: `job-tmp prepared dir=/home/agent/.scrum4me-tmp/cmv0nye6u000n6f17628y6jud`. - De reviewer kloonde de repo naar `$TMPDIR/repo`; `npm ci --ignore-scripts` slaagde (52 packages). - De eerste `npm test` gaf 20 rode files met 391/391 tests groen; die files vielen vermoedelijk om op de nog niet geïnitialiseerde submodule. Na `git submodule update --init` slaagde `npm test`: 88/88 files, 1326 tests geslaagd en 8 overgeslagen. `typecheck:dispatch` was groen. - `post_pr_review` gaf APPROVED, met de vitest-telling in de body. De job eindigde met exit 0 en de job-tmp-map was daarna weg. ## Oplossing --- *2026-10-09T07:51:22.660Z — mac:claude* Opgelost in de legacy worker: scrum4me-docker#124. PR_REVIEW-jobs krijgen een uitvoerbare scratch-map per job op het disk-volume (`/home/agent/.scrum4me-tmp/<job>`). De runner zet `TMPDIR` daarheen en neemt in het prompt een sectie op die het gebruik ervan voorschrijft; na de job ruimt hij de map op en bij de start veegt hij restanten op. De fix in het dispatch-kind (#123, `/tmp` exec) blijft staan, maar raakte de PR-reviewer niet. Uitgerold op 2026-10-09 via de Dashboard-flows op scrum4me-srv en max2. Runtime-bewijs: job cmv0nye6u000n6f17628y6jud. De reviewer kloonde de repo naar `$TMPDIR`, `npm ci` slaagde en de vitest-suite slaagde (1326 geslaagd, 8 overgeslagen). De review was APPROVED en de map was na de job verwijderd. <!-- s4m:issue:cmv00sh570027p717k3khddfb -->
janpeter 2026-10-08 23:07:19 +02:00
Sign in to join this conversation.
No milestone
No project
No assignees
1 participant
Notifications
Due date
The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set.

Reference
janpeter/scrum4me-docker#122
No description provided.