feat(cron): missad-tick-detektion — heartbeat per schema, 503 när ett jobb slutar komma #45
6
Commits
| Author | SHA1 | Message | Date | |
|---|---|---|---|---|
|
|
b8b6276528 |
merge: main in i cron-heartbeat-grenen — konflikterna var redan lösta på main
Konflikt i fyra filer, alla för att main hunnit få motsvarande arbete:
- .gitleaks.toml: main har 38 precisa filsökvägar; vår gren hade en bred glob
('.claude/skills/.*'). Mains version är striktare och gitleaks ger "no leaks
found" på main-trädet — vår breda glob togs bort i stället för att slås ihop.
- package.json/package-lock.json: våra säkerhetsbumpningar (nodemailer 10.1.4,
zod 4.6.6, vitest 4.1.12) är överträffade/motsvarade av main, och main har
grön security/scan. Mains filer behålls; ingen lockfile-omgenerering behövs.
- .npmrc: main har redan min-release-age=7.
docker-compose.yml gick ihop utan konflikt: pids_limit 200 och mem_limit 256m
från #43 behålls, och cron-healthchecken är vår heartbeat-sond mot
/api/cron/health. Den ersätter #43:s process-grep med flit — heartbeat ser även
tysta jobbhopp, vilket var incidenten #43 beskrev.
|
||
|
|
f34bd26425 |
fix(security): Semgrep-steget grönt — min-release-age=7 i .npmrc
Semgrep p/ci --error gav ett enda blockerande fynd efter att Trivy och OSV blivit gröna: .npmrc saknade minsta release-ålder (package_managers.npm.npm-missing-minimum-release-age). Regeln finns för att en komprometterad npm-release oftast rycks tillbaka inom några dagar; att vänta sju dagar innan en ny version får lösas in tar bort det billigaste angreppsfönstret. npm >= 11.10 förstår nyckeln (vi kör 11.19.1), äldre npm ignorerar okända nycklar. Verifierat: npm config get min-release-age -> 7, npm install --package-lock-only gav ingen låsfillsdiff, semgrep scan --config=p/ci --error -> rc=0 utan fynd. Fälla: gäller även egna @siax/*-paket. Behöver en färsk intern publicering in inom sju dagar används --min-release-age=0 i det enskilda fallet, inte ett sänkt tak i .npmrc. |
||
|
|
c3a2ace846 |
feat(cron): missad-tick-detektion — heartbeat per schema, 503 när ett jobb slutar komma
Den 2026-11-15 tappade accounted-cron 1 497 av 10 455 körningar på ett dygn (14,3 %) när pids_limit 30 fick fork/exec /bin/sh att misslyckas. supercronic hoppade tyst över tickarna. Containern var Up hela tiden, appen svarade 200 på allt, och enda spåret var cron-containerns egen logg. Orsaken är fixad i #43; det här gör att ett tappat jobb SYNS nästa gång. Tre luckor stängs: 1. Ingen körningshistorik — with-cron-context loggade men skrev inget beständigt, så en körning som aldrig startade lämnade inget spår. 2. Cron-tjänstens healthcheck var `ps ax | grep supercronic`, som bara blir röd när processen dör, inte när scheman slutar köra. 3. Ingen hade kodifierat vad "för sen" betyder per schema. Implementering: - lib/cron/cron-interval.ts: tolkare för 5-fälters cron (det enda vercel.json använder) som räknar ut VÄRSTA gapet i sekunder över ett 12-årsfönster (behövs för 29 februari), inte medelgapet. Okänd syntax kastar hellre än gissar. - scripts/generate-crontabs.ts skriver nu även lib/cron/schedules.generated.ts (path + schedule + maxIntervalSeconds) från samma vercel.json-array som crontaben, så en schemalagd path som kontrollen inte känner till inte kan uppstå. Drift-testet jämför filen byte för byte. - supabase/migrations/20261115190000_cron_heartbeats.sql: en rad per path (declared_at, last_started_at, last_completed_at, last_status, last_http_status, last_duration_ms). RLS på, noll policies: instansglobal schemaläggning är inte tenantdata. - lib/cron/heartbeat-evaluation.ts: ren utvärdering — ok / pending (aldrig körd men deklarerad inom sin egen kadens) / stale. Tröskel 2 x kadens + 120 s. Mätt från last_started_at, inte completion: en hängd körning avslutas aldrig och supercronic skjuter då upp varje senare tick, så ett completion-baserat mått hade sett levande ut. - lib/cron/heartbeat-store.ts: Supabase-IO. Skrivningar är best effort (kastar aldrig — en mätningsskrivning får inte fälla jobbet den mäter); läsningar kastar så endpointen kan säga "kan inte verifiera" istället för att ljuga grönt. No-op utan Supabase-env. - app/api/cron/health/route.ts: 200 när alla scheman ligger inom sina fönster, 503 vid stale eller oläsbart lager. Deklarerar okända paths först (nytt jobb får respit istället för omedelbart rött). Autentiseras med befintlig cron-hemlighet, report:false så en felkopplad probe inte spammar auth-larm. - lib/api/with-cron-context.ts: skriver heartbeat per körning (path ur request-URL:en) med status och duration. 401 räknas inte som körning. - docker-compose.yml: cron-healthcheck byter från supercronic-grep till att anropa /api/cron/health med `$${CRON_SECRET}`/`$${APP_URL}` (dubbelt $ krävs, annars interpolerar compose på värden), start_period 120 s. Migrationen är redan applicerad på accounted-sb-db (additiv, 0 rader) så endpointen fungerar direkt vid deploy. Ordning vid utrullning: deploya appen först, recreata cron-containern sedan — den gamla imagen saknar routen, och healthchecken failar då korrekt stängt (verifierat i containern: curl -f ger 404/rc=22 mot icke-deployad route). Verifiering: 99 nya tester (kadens 60/120/300/3600/7200/86400/604800 s, 29 februari, cron-regeln OR; utvärdering ok/pending/stale/hängd körning; endpoint 200/503/401/unverifiable; wiring inklusive 401 utan heartbeat och kastat heartbeat-fel som inte fäller körningen; drift av genererad fil). Hela sviten 1687 filer / 22 400 tester grön; check:types 533/533; check:lint 0 fel; check:guards passed. Revert: git revert <sha> (kod + migration + compose i en commit). Migrationen kan lämnas kvar om bara koden rullas tillbaka. |
||
|
|
9482d64aa2 |
fix(deps): OSV-gaten grön — 24 sårbarheter stängda, xlsx undantagen med bevis
OSV Scanner (steg 6 i security-gaten) fällde jobbet efter att Trivy blivit grönt: 43 advisory-poster över 10 paket. Samma skanning mot origin/main ger 9 av 10 paket — posterna publicerades mot versioner vi redan kör, så main hade blivit röd vid nästa nattliga skanning oavsett denna PR. Bumpat (alla verifierade med osv-scanner och hela unit-sviten): nodemailer 10.0.6/10.0.10 -> 10.1.4 (direkt + override för mailparser) zod 4.4.3 -> 4.6.7 (^4.6.6) vite 8.1.3 -> 8.3.8 (override ^8.1.6, dev via vitest) vitest 4.1.11 -> 4.1.12 (^4.1.12, tar @vitest/mocker 4.1.12) @babel/core 7.28.6 -> 7.29.13 (override, dev via eslint-plugin-react-hooks) fast-xml-parser 5.7.2 -> 5.12.1 (override, via @aws-sdk/xml-builder) minimatch 9.0.9 -> 11.0.8 (override, dev via typescript-eslint) postcss-selector-parser 6.0.10 -> 6.1.6 (override, via @tailwindcss/typography) python-multipart -> >=0.0.31 (explicit floor i mcp-builder-skillens requirements.txt; OSV kan inte lösa en otransitiv, opinnad requirement) xlsx 0.20.3 undantas i osv-scanner.toml med effectiveUntil 2027-05-15: GHSA-4r6h-8v6p-xvw6 och GHSA-5pgg-2g8v-p4x9 har introduced:0 och INGET fixed-event (kontrollerat mot api.osv.dev), eftersom SheetJS slutade publicera till npm efter 0.18.5. Vi pinnar 0.20.3 från cdn.sheetjs.com, som redan innehåller båda fixarna (0.19.3 / 0.20.2). Skanningen rapporterar alltså en versionsupplösningsartefakt. Filen varnar uttryckligen om att lib/import/* parsar användaruppladdade arbetsböcker, så undantaget får inte läsas som tillstånd att acceptera ofixade parser-CVE:er. Verifiering: osv-scanner --config=osv-scanner.toml -> "No issues found" rc=0; 1687 filer / 22 400 tester gröna; check:types 533/533; check:lint 0 fel; check:guards passed; Trivy 0 fynd. Revert: git revert <sha>. Enda beteendepåverkande posten är osv-scanner.toml (utan den blir gaten röd igen på xlsx); minimatch 9 -> 11 används bara av lint-kedjan och verifieras av check:lint + sviten. |
||
|
|
9d28056531 |
fix(deps): Trivy-gaten grön — dompurify/source-map-js/undici patchade, nodemailer 10.0.6
Säkerhetsgaten (security / scan) föll på Trivy fs, inte på gitleaks: 8 fynd i package-lock.json (1 CRITICAL, 7 HIGH). dompurify 3.4.14 -> 3.4.18 GHSA-cg2g-xh64-v4q7 (CRITICAL), GHSA-mrv2-3pqr-j5jr nodemailer 9.1.1 -> 10.0.6 CVE-2026-90776, GHSA-v53p-9fqp-m79j source-map-js 1.2.1 -> 1.2.2 CVE-2026-93749 undici 6.29.0 -> 6.29.1 CVE-2026-109383, CVE-2026-109869, CVE-2026-87018 dompurify, source-map-js och undici är transitiva (posthog-js, tailwind/postcss, @ai-sdk/provider-utils) och pinnas med overrides. nodemailer är en direkt dependency och bumpas till 10.x: de kvarvarande 9.x-advisories är bara fixade där, vilket PINNED_DEPS-posten redan slog fast som en separat granskad PR — det här är den PR:en. Den 10.0-API som används (createTransport/sendMail) är oförändrad; email-sviten (99 tester) och hela unit-sviten (22 339) är gröna, check:types/check:lint/check:guards likaså. Verifierat: trivy fs --severity HIGH,CRITICAL -> 0 vulnerabilities, 0 secrets, 0 misconfigurations. Revert: git revert <sha> (återställer package.json, package-lock.json och PINNED_DEPS-posten tillsammans). |
||
|
|
6aeb64aae8 |
ci(security): snäv gitleaks-allowlist — 81 dokumentplatshållare/fixturer fällde gaten
security-gaten (--no-git i arbetsträdet) fällde varje PR med 81 fynd sedan länge. Alla granskade rad för rad: dokumentplatshållare som slutar på "..." (gnubok_sk_live_..., whsec_b3a7c9e2...), testfixturer (gnubok_inv_*, idem1234-*, UUID-formade testnycklar) samt två false positives från generic-api-key (desc_ink2_declaration, "SalesLoft/Drift" i löptext). Bevis att ingen är en drifthemlighet: sha256 för samtliga 81 värden jämfördes mot 225 miljövariabler i den körande accounted-stacken på server7 — 0 träffar. Reglerna är oförändrade (useDefault = true); bara de kända platshållar- och fixturformerna undantas, inte hela test-/dockataloger. Negativt test: en realistisk ghp_/AKIA-token i en .ts-fil ger fortfarande exit 1. |