圧縮

技術解説

ripgrep と同じ1コマンドで、12本・7形式・zip・pbf を探せるようにしました — Wide Field⑮(最終回):無料版は同等のまま、uvp はカーネル8.6万本で4.0倍、1.5倍を超える負けは2種類

2種類だけ残りました。 14回かけて、ripgrep に負けている場所を全部数え直したら、1.5倍を超える負けは2種類でした。どちらも有料版 uvp が索引を持つ代価です。 探せる入口を7つ増やしておいて、速さの負けが2…
技術解説

rg に gzip をつながずに gz で書き出す — Wide Field⑩:50GB で117.20秒→11.89秒、ただし3GBでは ripgrep と同等

形が、戻りませんでした。 bz2 で保管していたログを探して、結果をまた bz2 で置きたい。入口は7つの圧縮形式を読めるのに、出口はテキストだけでした。 読めるのに書けない、というのは何が足りないのでしょうか。 計測は…
技術解説

xz だけ ripgrep -z に6.19倍負けていた — Wide Field②:外部コマンドを呼ばずに7形式、束ねたら止まった並列を直すまで

【追記 2026-10-04】Windows では、圧縮の一部の形式で ripgrep の方が速い結果でした この記事の「1.5倍以上の負けは 0 項目」は Mac での結果で、今も正しいです。同じテスト一式を Wind…
技術解説

圧縮ログの検索を ugrep・ripgrep・zgrep と比べた — 1回目は同等、2回目は形式によらず 0.11〜0.12秒

【追記 2026-10-04】v1.7.3.6.9 では、平文5本も同等(uvf がわずかに速い)になりました この記事の「平文だけを複数まとめて探すと ripgrep の方が少し速い(1/1.17)」は、書いたときの版…
技術解説

ログは圧縮したほうが、速く探せます — 1GBと3GBで7形式を測りました

【追記 2026-10-16】いまの速さ — v1.9.0「Full Spectrum」で測り直しました 本文の uvf・uvp の数字は、開発版 Wide Field(1.7.1.6・2026年9月)のものです。同じ…
技術解説

gzip の代わりに .uwvz で置いておく — 1/9 に縮んで、7秒で探せて、無料で元に戻せる

読み終わったログをどこに置くか、という話の続きです。 gzip で固めると小さくなりますが、探すときは zgrep で全部展開しながら読むことになります。50GB のログなら、探すたびに 50GB を展開する。以前それを…
技術解説

「3年前のログを出してください」— 監査対応を仕組みで乗り切る4項目

提出期限は2週間。 保管はしてあります。では、取り出すのに何日かかるか、答えられますか。 保管期間と取り出し時間は、別々に設計しないと片方が破綻します。 監査・内部統制・規制対応でログを求められる場面には、障害対応とは違…
技術解説

読み終わったログの置き場所 — 消す・残す・圧縮するの判断基準

障害の調査が終わりました。報告書も出しました。手元に残っているのは、その調査に使った数十GBのログです。 さて、これをどうするか。 多くの現場で、この判断はその場の気分で行われています。今週は容量に余裕があるから残す。来…