LogHouseは1年で19PiBから100PB、500兆行以上に急拡大した
OpenTelemetryの一般的パイプラインではCPU負荷とデータ損失が問題となり、20×増イベントに対応できなかった
SysEx（System Tables Exporter）でClickHouseのシステムテーブルをバイト単位で直接転送し、マシュリングを排除して大幅な効率化を実現
動的にスキーマを生成し、Mergeエンジンでバージョン差を透過的に統合する仕組みを導入
HyperDXを採用し、Lucene風構文とSQLの両方で大規模データの探索・相関分析が可能に
高カーディナリティのwideイベントモデルを採用し、集計をクエリ時に行うことで観測データの柔軟性と詳細度を両立
Get notified when new stories are published for "🇯🇵 Hacker News 日本語"