Poulpe 52cd09db1b fix(05_inference): save error_msg in DB + skip stage04-degraded segments
- upsert_job now receives error_msg= on failure → debug possible
- Guard before run_inference: skip segments with stage04=degraded,
  mark as skipped instead of attempting inference on bad frames
- Addresses: 10 orphan error records from iter-5 batch (6 were degraded at 04,
  4 had transient SSH failure with no trace in DB)

Author: Poulpe <claude@nowyouknow.fr>
2026-05-13 04:35:41 +00:00

cosma-qc

COSMA post-acquisition QC pipeline — reconstruction photogrammétrique par GoPro (lingbot-map), queue de jobs distribués, dashboard web pour suivi terrain le jour même.

Objectif

Après une acquisition AUV (2 GoPros × 2-3 AUVs × heures d'enregistrement), savoir rapidement si la couverture est complète avant de replier la mission — sans attendre les 30 jours du traitement photogrammétrique complet.

Pipeline

SSD plugged ─┐
             ├─▶ Ingestion ─▶ Frame extraction (per GoPro × segment)
             │                        │
             │                        ▼
             │                  Job queue (SQLite)
             │                        │
             │         ┌──────────────┼──────────────┐
             ▼         ▼              ▼              ▼
         Dashboard  Worker .87    Worker .84    (scalable)
         (FastAPI)   (3060)       (3090)
             │         │              │
             │         └─▶ PLY ◀──────┘
             │              │
             │              ▼
             └──────── ICP stitch (Open3D) ─▶ viser viewer

Stack

  • Backend : FastAPI + SQLite
  • Frontend : HTMX (UI réactive sans build JS)
  • Queue : table SQLite + workers SSH-triggered
  • Monitoring : polling nvidia-smi sur .87 / .84, df pour disque
  • Reconstruction : lingbot-map (GCT-Stream windowed)
  • Stitch : Open3D ICP

Déploiement

  • Service sur .82 (stable, Caddy pour URL propre)
  • Workers : SSH vers .87 (3060 12 GB) et .84 (3090 24 GB)

État

Scaffold en cours.

Description
COSMA post-acquisition QC pipeline: per-GoPro lingbot-map reconstruction, job queue, web dashboard
Readme 6.3 MiB
Languages
Python 76.3%
HTML 11.6%
CSS 11.5%
Dockerfile 0.6%