将庞大的CSV文件提供给LZ4压缩API的最佳方法是什么?以下对于大型文件不是最佳选择。
byte[] data = file.getBytes();
您可以尝试https://github.com/flanglet/kanzi。块压缩器采用InputStream并将其拆分为块(您可以在命令行中指定大小)。
在Wiki中,您可以执行以下操作:
java -cp kanzi.jar kanzi.app.BlockCompressor --input = myFile.csv --output = myFile.knz --overwrite --block = 8M --transform = lz --entropy = none
本文收集自互联网,转载请注明来源。
如有侵权,请联系[email protected] 删除。
我来说两句