Cloudflare Queues im Doppelpack: Telemetrie wird zum stündlichen Datenarchiv

Double Buffering with Cloudflare Queues

Ein Doppel-Puffer-Prinzip sammelt Telemetrie-Events in zwei Queues, die per Modulo-Rechnung abwechselnd nach UTC-Stunde befüllt werden. Ein Workflow leert zur halben Stunde jeweils die inaktive Queue, komprimiert den Batch mit gzip und schreibt ihn als partitionierte Datei nach R2. Das Ergebnis: ein serverloser Data Lake mit stündlichen Archiven und minimalen Speicherkosten.