]> gitweb.fperrin.net Git - DictionaryPC.git/commitdiff
WiktionarySplitter: Support compressed inputs.
authorReimar Döffinger <Reimar.Doeffinger@gmx.de>
Sat, 7 Oct 2017 19:48:29 +0000 (21:48 +0200)
committerReimar Döffinger <Reimar.Doeffinger@gmx.de>
Sat, 7 Oct 2017 19:48:29 +0000 (21:48 +0200)
Unfortunately bzip2 decompression is very slow (slower
than the XML parsing in fact), so it might make sense to
re-compress the downloaded files from bzip2 to xz.
If the decompression could be done in a separate thread,
xz compression would even provide a speedup if the files
are on a slower (non-SSD) disk.


No differences found