摘要: 文件内容的格式是:1 张三2 李四3 张三第二列有重复数据,去重的脚本如下:#!/bin/bashsort -t\t -k2 File.txt | awk -F'\t' '{if($2 == VALUE) {}else if($2 != VALUE){ VALUE = $2; print $0; }}' > target.txtsort -t\t -k1 target.txt > result.txt rm target.txt 首先将第二列进行排序:sort -t\t -k2 File.txt 然后if($2 == VALUE) {}判断 第一列是 阅读全文
posted @ 2012-09-25 19:51 桂皮猪 阅读(6360) 评论(2) 推荐(1) 编辑