linux uniq命令在批量处理文件时的技巧有哪些

1. 使用uniq命令配合管道符号(|)可以快速去除重复行：

cat file.txt | uniq 

2. 使用uniq命令的-c参数可以统计每行重复次数：

uniq -c file.txt 

3. 使用uniq命令的-d参数可以只显示重复行：

uniq -d file.txt 

4. 使用uniq命令的-u参数可以只显示不重复行：

uniq -u file.txt 

5. 使用uniq命令的-i参数可以忽略大小写进行比较：

uniq -i file.txt 

6. 使用uniq命令的-f参数可以忽略前n个字段进行比较：

uniq -f n file.txt 

7. 使用uniq命令的-s参数可以忽略前n个字符进行比较：

uniq -s n file.txt 

8. 使用uniq命令的-w参数可以指定比较的字符数：

uniq -w n file.txt