pythonのgzipモジュールで読み込んで処理してたらメモリエラー。
MemoryError
gzip: sample.gz: invalid compressed data--format violated
おー、圧縮ファイル壊れてる。3G位ある圧縮ファイルで、つくんのに5日かかったのでちょっと凹んだ。
早く帰りたかったのでperlでちょこっと分割してtelnetで分散処理するスクリプト書いちゃったけど(これだと半日で終わるかな)。
家に帰ってきてからpythonでtelnetするモジュールを探してみた。