まず読む — 概要・よくある質問・記事の地図

UwView シリーズ — 探す UwView・比べる UwDiff

巨大なファイルを開いて探すのは UwView、2つのファイル・フォルダを比べるのは UwDiff。どちらも Windows・macOS・Linux で動きます。→ UwDiff の概要

巨大なログ・テキストを「CLI で探して、GUI で読む」道具 UwView と、2 つのファイルを比べる UwDiff の入口です。

はじめての方は、次の 3 つから読むのが早道です。

知りたいこと 読むもの
UwView・UwView Pro・UwDiff は何か、どれを使えばいいか 概要
巨大ファイルが開けないとき、何で開けばいいか(実測) 「巨大ファイルが開けない」の答えをまとめた
ripgrep・grep・klogg・EmEditor などと比べた数字(負けも全部) ベンチマーク

このページでは、よくある質問と、これまでの記事 127 本をテーマ別にまとめています。


よくある質問

Q. UwView・UwView Pro・UwDiff は何が違いますか?

UwView(無料)は、巨大なファイルを開いて探す道具です。画面(GUI)と検索コマンド uvf が入っています。UwView Pro は有料版で、索引を保存して 2 回目から瞬時に開き、多段階検索・集計・編集(Edit Upgrade)・コマンド uvp が加わります。UwDiff は 2 つのファイル・フォルダを比べる別の道具(画面とコマンド uvd)です。全体は 概要、Pro は UwView Pro、UwDiff は UwDiff をご覧ください。


Q. 何 GB・何行まで開けますか?

実データでは 1 本 258.68GB・45 億行(アメリカ全土の OpenStreetMap)まで開いて確かめています(258.68GB・45億行を開く)。100GB のログを 3 つの OS で開いた記録は 100GB のログは本当に開けるのか、理論上の上限は 51GB・8.9億行を開いて、理論上どこまで開けるのか計算してみた にあります。


Q. 「ファイルが大きすぎて開けません」と出ます。どうすれば?

メモ帳・VS Code・Excel などで開けない理由と、10GB・50GB・258GB を実際に開いて探した結果を 「巨大ファイルが開けない」の答えをまとめた にまとめています。メモリ 16GB のノートで 50GB を扱う手順は 16GBメモリのノートPCで、50GBのログファイルを開いて検索する方法 です。


Q. ripgrep・grep より速いのですか?

大きな 1 本のファイルでは ripgrep と同等です(1.5 倍未満の差は「同等」と呼んでいます)。小さなファイルが大量にある場所では ripgrep の方が少し速く、負けている所も全部載せています。全記録は ripgrep・grep と比べた全記録をまとめた、表は ベンチマーク にあります。


Q. klogg・EmEditor とはどう違いますか?

ファイルを「開く」だけなら klogg の方が速い場面があります。違いは「探してから読むまで」を 1 回でつなぐ所です(klogg に開くのは負けました。通すと uvf が勝ちます)。EmEditor とはメモリ 16GB のノートで比べました(3GBでは負けて、50GBでは崖だった)。


Q. gz などの圧縮ログを展開せずに探せますか?

はい。gz・bz2・xz・lzma・zst・lz4・br の 7 形式を、外部コマンドなしでそのまま探せます。ugrep・ripgrep・zgrep と比べた記録は 圧縮ログの検索を ugrep・ripgrep・zgrep と比べた、形式の選び方は ログは圧縮したほうが、速く探せます です。


Q. Shift-JIS・EUC-JP・UTF-16 のファイルも読めますか?

文字コードを自動で見分けます。日本語のログで起きやすい罠は 日本語ログが読めない夜、Pro が索引の中で UTF-8 にそろえる仕組みは Shift-JIS・EUC-JP・UTF-16 を索引の中で UTF-8 にそろえた にあります。


Q. Word・Excel・PDF の中も探せますか?

v1.9.0 から、無料版でも .docx・.xlsx・PDF の中の文字を探せます(読むだけ。古い .doc・.xls、パスワード付き、文字の無い PDF は不可)。UwView v1.9.0「Full Spectrum」— ripgrep と比べながら、(プレーン・Word・Excel・PDF・圧縮)×(CLI・GUI)×(巨大・多数)×(4つの文字コード)×(複雑な検索)の全域を速くした をご覧ください。


Q. コマンドで探した結果を、画面で読めますか?

uvf ファイル 語 -open と打つと、探し終えた瞬間に画面が開き、ヒットした行が並びます。画面はもう一度探しません。grep のパイプを画面で組む使い方は grep のパイプを画面で組む、書き方は uvf コマンド操作マニュアル にあります。


Q. 何本ものファイルをまとめて探せますか?

はい。uvf "logs/**/*.log" ERROR のようにワイルドカードで指定し、平文と圧縮ファイルが混ざっていても 1 回で探せます(平文と gz の12本を1コマンドで・ripgrep と同じ1コマンドで、12本・7形式・zip・pbf を探せるようにしました)。


Q. 無料版で足りますか? Pro にすると何が変わりますか?

1 回探すだけなら無料版の uvf で足ります。同じファイルに何度も戻るなら、Pro の保存した索引で 2 問目から速くなります。同じ 50GB を 3 つの使い方で比べた 無料の uvf だけで ripgrep とも klogg とも渡り合えます。uvp が効くのは2問目から と、UwView Pro の「無料版と Pro の違い」をご覧ください。


Q. 巨大ファイルを編集できますか?

UwView Pro に Edit Upgrade を足すと編集できます。1 億行・10GB で 21,994 か所を置換した記録は 1億行・10GBのファイルを21,994箇所、16.8秒で置換しました。増えたのは3.7MBです、48GB を EmEditor と比べた記録は 48GBのファイルを「編集して、途中で保存する」まで です。


Q. 2 つのファイルの違いを見るには?

比べる道具 UwDiff を使います。CSV をキー列で照合し、行の順番が違っても、文字コードが違っても比べられます(UwView で探して、UwDiff で比べる・Excel で開けない CSV を、前月の版と照合する)。実測は UwDiff の実測 にあります。


Q. 速さの数字はどう測っていますか?

機種・ストレージ・回数・キャッシュの状態を必ず書き、1.5 倍未満の差は「同等」と呼びます(自分に有利な数字を「差」と呼ばない基準を先に決めた)。cold と hot の作り方は 速さの話をする前に決めること、ファンレスの Mac で数字がぶれた話は ファンレスMacでベンチを取ったら54%ブレた にあります。環境をまたいで秒数を比べないでください。


Q. どの OS で動きますか? どう入れますか?

Windows・macOS・Linux で動きます。Mac は Homebrew、Windows は Scoop、Linux は Snap で入れるのが簡単です。手順は ダウンロード と ヘルプ・サポート にあります。


Q. 使い方の資料はどこにありますか?

画面の使い方・コマンドの書き方・Pro の機能・UwDiff の資料を 操作説明 にまとめています。


Q. 不具合や要望はどこへ送ればいいですか?

ヘルプ・サポート の「お問い合わせ」をご覧ください(コメント欄・メール・GitHub Issues)。手元の巨大ファイルで測った結果、とくに負けていたという報告を歓迎します。


テーマ別 記事一覧

新しい順ではなく、書いた順に並べています。

まず読む — まとめ記事

UwDiff — 2つのファイルを比べる

巨大ファイルを開く — 何 GB まで・何億行まで

CLI — ripgrep・grep と比べる

GUI・エディタ — klogg・EmEditor などと比べる

UwView Pro の機能 — 多段階検索・集計・.uwvz

圧縮・文字コード

ログ調査の実務(25 回の連載)

改善記「First Light」— ripgrep・klogg に追いつくまで(13 回)

「Wide Field」— 多数のファイル・7 形式・zip・pbf(15 回)

「Full Spectrum」と 3 OS テスト — v1.9 以降

開発の記録・測り方

リリース・お知らせ


関連


開発者より: アプリ・Kindle本・公開プロジェクトの一覧は GitHub: amru195704 にまとめています。

タイトルとURLをコピーしました