今天帮客户统计唯一ip,大概2万多行,以前数据量少的时候用Excel直接删除重复值即可,这个量有大点,想找下sublime有没有快捷键结果没找到,最后搜了下vi删除重复行,命令很简单,效率也很高。
vi 打开文件 然后输入以下命令:
:sort #排序
:g/^\(.\+\)$\n\1/d #删除重复行
今天帮客户统计唯一ip,大概2万多行,以前数据量少的时候用Excel直接删除重复值即可,这个量有大点,想找下sublime有没有快捷键结果没找到,最后搜了下vi删除重复行,命令很简单,效率也很高。
vi 打开文件 然后输入以下命令:
:sort #排序
:g/^\(.\+\)$\n\1/d #删除重复行
EditPlus&UltraEdit自带删除重复行功能:http://jingyan.baidu.com/article/ae97a646c9a2cdbbfd461d96.html