大容量ファイル

技術解説

1億行の巨大テキストを「諦めてDBに入れる」前に — 障害調査・AIデータ前処理のための現実解と実測

「この数十GBのファイル、DBにインポートするか、小さく分割してくれ」 定常運用なら、それが最も安全な正攻法です。しかし現場には、DBを構築する時間もディスクの空きもない障害対応や、1億行のデータセットのうち数行の構文エ…
技術解説

16GBメモリのノートPCで、50GBのログファイルを開いて検索する方法

【追記 2026-10-16】いまの速さ — 2回目からの差は当時より開きました。1回目は今も ripgrep と同等です 本文の ripgrep・klogg との数字は、2026年7〜9月に Mac と外付け USB…
技術解説

【AI格付けS〜C】EmEditor・klogg・ripgrep などとの比較記事10本をAIに読ませたら、「サイズ別早見表」が返ってきた

前回まではAIに「50GBのログ調査ツール」を尋ねる側でした。今回は逆です。私がこれまで書いてきた他ツールとの比較記事10本——EmEditor・klogg・ripgrep/grep・UltraEdit・010 Edit…
技術解説

3GBでは負けて、50GBでは崖だった — EmEditor と UwView Pro+Edit Upgrade を16GBメモリのノートPCで実測

先に負けから言います。置換の速さでは、EmEditor が7.0倍高速でした。 EmEditor は、巨大ファイルを扱える Windows の定番テキストエディタです(公称では16TBまで対応)。私が開発している UwV…
技術解説

「ブラウザで巨大ログを開ける」には、3つの段階がある — 47GBで確かめた

「ブラウザで巨大なログを開ける」——最近そう謳うツールをいくつか見かけます。私が開発している UwView にも、技術検証用に公開している Wasm(WebAssembly)版があるので、他人事ではありません。 実際に…
技術解説

ripgrepは巨大単一ファイルでも最速なのか — 51GB・8.9億行で rg / grep / UwView Pro を実測した

rgが、grepに負けた。 51GBのログを渡されて rg を叩く——リポジトリ検索と同じ手つきで巨大ファイルに向かった経験は、誰にでもあると思います。「検索は rg 一択」と言われるくらいですから。ではその一択は、巨大…
技術解説

20年前の自作ビューアが、Vectorでまだ生きていた — 「大容量テキスト」は20年で90倍になった

【追記 2026-10-07】2006年の UwView 0.6 の Vector ページは、2026年10月に作者の申請で削除しました(削除時点で累計 12,666 ダウンロード)。いまの UwView は、Vecto…
比較

巨大ファイル編集は「開けるか」ではなく「何度中断できるか」— 010 Editor・UltraEdit・UwView Pro(Edit)を Mac ARM で比較

巨大なテキストファイルを扱うとき、「ファイルを開ける」というだけでは十分ではありません。 実際の作業では、文字列を検索し、一括置換し、手作業で修正し、いったん作業を終了して、翌日また開き直します。 text Open →…
比較

48GBのファイルを「編集して、途中で保存する」まで — EmEditor と UwView Pro(Edit)を同じWindowsノートで比較

前回は「48GBのファイルを開いて検索するまで」を比べました。今回はその先——編集して、途中で保存するまでです。 同じPC・同じ48GBファイル・同じ検索語で、比較の条件を揃えてあります。 比較相手は前回と同じ EmEd…
技術解説

1億行・10GBのファイルを21,994箇所、16.8秒で置換しました。増えたのは3.7MBです

UwView Pro の Edit Upgrade(巨大ファイルを、書き換えずに編集) で、1億行のファイルを実際に編集した記録です。計測時のビルド名は UwEditor Pro で、画面にはその名前が出ます。 やったこ…