do7be.exports

寿司の話かエンジニアリングの話

Treasure Data上の過去データをガツッと削除した話

Treasure Data上にデータが大量に溜まっており、使用可能容量が危うくなる状況に直面したので、古いデータだけ削除することにしました。

詳細な手順はQiitaに書きました。

qiita.com

これ、数年前からのログをずっと貯めていたテーブルがありまして…

80億レコードくらいあったわけなんですな……w

明らかに何年もとっておく必要のないログをなぜ今まで放置してたのはわかりません…

ちなみに、EmbulkでS3に移すという案もあったんですけどね、普通に考えて要らなかったので思い切って70億レコードほどバッサリいきました( ^ω^)