dedup:用于对文件或流中的条目进行重复数据删除的命令行工具

【文件属性】：

文件名称：dedup:用于对文件或流中的条目进行重复数据删除的命令行工具

文件大小：25KB

文件格式：ZIP

更新时间：2024-06-06 13:34:36

rust command-line-tool text-processing uniq deduplication

一个用Rust编写的更好的重复数据删除器。 基本用法： dedup <INPUT> [-o ] 运行dedup --help来查看： USAGE: dedup.exe [FLAGS] [OPTIONS] [INPUT] FLAGS: -l, --count-lines If flag is set only print the number of unique entries found. --mmap Enables use of memory mapped files. This is enabled by default. --no-mmap Prohibits usage of memory mapped files. This will

【文件预览】：
dedup-master
----.gitignore(46B)
----README.md(2KB)
----appveyor.yml(2KB)
----Cargo.toml(805B)
----benchsuite()
--------benchrunner(9KB)
----cli.yml(884B)
----src()
--------error.rs(749B)
--------args.rs(4KB)
--------stream.rs(2KB)
--------set.rs(149B)
--------main.rs(3KB)
--------buffer.rs(2KB)
----fastchr()
--------Cargo.toml(454B)
--------tests()
--------src()
--------benches()
----.travis.yml(2KB)
----Cargo.lock(29KB)
----ci()
--------install.sh(551B)
--------before_deploy.sh(575B)
--------script.sh(248B)
--------before_deploy.ps1(526B)