大容量ファイル

技術解説

51GB・8.9億行を開いて、理論上どこまで開けるのか計算してみた — 実データと「約920京行」の話

大容量テキストビューア「UwView」をGitHubで公開した記事では「最大2億行クラスを高速に閲覧できる」とうたっていました。ただ、それまでの実測は行番号を振っただけの合成データでのもの。「実際の、しかも桁違いに大きい…
技術解説

8.9億行を開いたテキストビューアは、理論上どこまで開けるのか?

「最大2億行」とうたっていた自作の大容量テキストビューア「UwView」で、先日OpenStreetMap日本全域をXML化した51GB・約8.9億行のファイルが問題なく開けたことを確認しました。総行数はwc -lと1行…
技術解説

UwViewで51GB・8.9億行の実データ(OSM日本)を開いてみた — 「お詫び:2億行は嘘でした」

先日、大容量テキストビューア「UwView」をGitHubで公開した記事を書きました。「最大2億行クラスを高速に閲覧できる」とうたっていますが、これまでの実測は行番号を振っただけの合成データでのものでした。「実際の、しか…