awk合并不同文件的指定字段-20150705

方法三 经典啊
[root@C66-test scripts]# cat filea.txt 韩海林 21 岁 海林韩 23 岁 韩林海 22 岁 林海韩 24 岁 [root@C66-test scripts]# cat fileb.txt 韩林海 男 海林韩 女 韩海林 女 林海韩 男
4
[root@C66-test scripts]#awk'NR==FNR{array[$1]=$0;next}{print array[$1],$2}' filea.txt fileb.txt 韩林海 22 岁 男 海林韩 23 岁 女 韩海林 21 岁 女 林海韩 24 岁 男
方法一
[root@C66-test scripts]# cat filea.txt 韩海林 21 岁 海林韩 23 岁 韩林海 22 岁 林海韩 24 岁 [root@C66-test scripts]# cat fileb.txt 韩林海 男 海林韩 女
1
韩海林 女 林海韩 男 [root@C66-test scripts]# awk '{if(NR != FNR ) {arrayb[$1]=$2} else {arraya[$1]=$2}}END{for(key in arraya)print key,arraya[key],arrayb[key]}' filea.txt fileb.txt 韩海林 21 岁 女 海林韩 23 岁 女 韩林海 22 岁 男 林海韩 24 岁 男
2
#命令行时候 if 中的 statement 表达式 需要用 {}括起来。
END { for(key in arraya) ##因为 arraya arrayb 有相同的 $1 数组元素名。 print key,arraya[key],arrayb[key] ##显示名字 年龄 性别 }
方法二
(此处相当于一个简单的判断和寻找过程，以名字为关键字去数组中找对应的元素)
} ##最后的输出就是合并的结果了。
###配合 awk 执行过程，理解此方法更好
6
小结：
1.了解 awk 执行过程。
2.next 命令的用法回顾 立刻停止处理当前行，读取下一行类似 C 语言中的 continue。 3.NR 和 FNR 区别。 NR 是目前所有输入的行号（总行号） FNR 是当前读入的文件中的行号。 [root@C66-test scripts]# awk '{print NR,FNR,$0}' filea.txt fileb.txt 1 1 韩海林 21 岁 2 2 海林韩 23 岁
awk 合并不同文件的指定字段
版本：V2.0 问题提出者：浮沉随浪（群友） 问题是否解决：是 文档作者：悠久之翼 修改记录：2015-07-05 系统环境：Centos 6.X （适合 32bit and 64bit） 内核版本：2.6.32 x86_64
格式约定： 蓝色字体：内容注释 目录： 问题描述： ...........................................................................................................................1 解决方法： ...........................................................................................................................1
3
方法二详解
###思路： ##可以理解为以把$2 或$0 追加到数组 array[$1]中 ##可是直接 array[$1]=$2 会把 array[$1]数据覆盖 ##合并 理解为追加 ##实现过程如下 array[$1]=array[$1]" "$2 ##这样不担心 array[$1]被覆盖问题了。 END{ for(key in array)print key,array[key] ###输出名字 key 和两个文件合并后的 $2 }
7
3 3 韩林海 22 岁 4 4 林海韩 24 岁 5 1 韩林海 男 6 2 海林韩 女 7 3 韩海林 女 8 4 林海韩 男
参考资料：
man awk，gawk-Effective AWK Programming
8
I
问题描述：
请使用 awk 命令将如下两份文件中名字相同的两行合并起来 A 文件： 韩海林 21 岁 海林韩 23 岁 韩林海 22 岁 林海韩 24 岁 B 文件：
韩林海 男 海林韩 男 韩海林 男 林海韩 男 输出效果： 韩海林 21 岁 男
解决方法：
解决方案 注:处理中文可能存在字符集问题 自己调试 LANG 变量
}
## array[$1]=$0 只会对第一个文件生效。
##处理完第一个文件后，array 数组会存放着所有 filea 文件内
容。数组名为$1(姓名)
{
##此处开始因为不符合 NR==FNR
##所以处理到了第二个文件时 执行下面命令
print array[$1],$2 ##以$1(也就是名字)为条件的 数组 array 中的元素
方法一 ...........................................................................................................................1 方法一详解 ...................................................................................................................2 方法二 ...........................................................................................................................3 方法二详解 ...................................................................................................................4 方法三 经典啊...............................................................................................................4 方法三详解 ...................................................................................................................5 小结： ................................................................................................................................... 7 参考资料： ...........................................................................................................................8
[root@C66-test scripts]# cat filea.txt 韩海林 21 岁 海林韩 23 岁 韩林海 22 岁 林海韩 24 岁 [root@C66-test scripts]# cat fileb.txt 韩林海 男 海林韩 女 韩海林 女 林海韩 男 [root@C66-test scripts]# awk '{array[$1]=array[$1]" "$2}END{for(key in array)print key,array[key]}' filea.txt fileb.txt 韩海林 21 岁 女 海林韩 23 岁 女 韩林海 22 岁 男 林海韩 24 岁 男
方法一详解
###思路： ##可以理解为以$1 为中心，合并两个文件的$2。 ##所以就把两个文件的$2 分开就好了。 ##实现过程如下。 { if(NR != FNR ) ##NR==FNR 代表第一个文件 NR!=FNR 代表第二个文件。 ##此判断是选择处理哪个文件。 {arrayb[$1]=$2} ##fileb 文件赋值给 arrayb[$1]数组 else {arraya[$1]=$2} ##filea 文件赋值给 arraya[$1]数组 } ##注：if (condition) statement [ else statement ]
#二变
5ቤተ መጻሕፍቲ ባይዱ
if(NR==FNR) {
a[$1]=$0
next
}
{
print a[$1],$2
}
#三解释
if(NR==FNR) { ##根据行号的差异判断是哪个文件 NR==FNR 就是第一个文件
array[$1]=$0
##把一个文件的每行赋值到数组中，数组名为$1 即姓名。
next
##停止处理当前行，读取下一行并开始处理
方法三详解
###思路： ##之前都是先处理后输出 ##也可以边处理边输出 ## 先处理 filea 文件，然后输出 ##实现过程如下 awk 'NR==FNR{array[$1]=$0;next} {print array[$1],$2}' filea.txt fileb.txt #一变 NR==FNR{ array[$1]=$0 next } { print array[$1],$2 }