LogHouse voksede fra 19 PiB til over 100 PB ukomprimeret data og nær 500 trillioner rækker.
Der var betydelig ineffektivitet og datatab i OpenTelemetry-pipelinen ved høje gennemstrømninger.
System Tables Exporter (SysEx) kopierer data byte-for-byte direkte fra ClickHouse-systemtabeller uden unødvendig marshalling.
SysEx bruger under 10% af den CPU, som OTel krævede for den mest kritiske datakilde, og sikrer ingen tabte logs.
Dynamisk skemahåndtering med ClickHouse Merge-engine giver sømløs forespørgsel på tværs af versionsændringer.
HyperDX leverer en indbygget ClickHouse-UI med Lucene-syntax til hurtig udforskning og SQL-støtte til komplekse analyser.
Strategien med wide events og høj kardinalitet gemmer alle datarækker uaggregeret og flytter aggregering til forespørgselstid.
Get notified when new stories are published for "🇩🇰 Hacker News Dansk"