求助：合并文件

iblicf

样本文件，目录下数个 csv ,
a.csv------------------
1999-1-1 , 8:00, xxxx,cccc,bbbb


b.csv-----------------------------
1999-1-1, 8:00, asdfa,adsf,fdsfd, sdfadsf,gadfdf
2000-1-1, 9:00, hehe,haha,dfdf,dddd,gggg

c.csv-----------------------------
1999-1-1, 8:00, tttt,yyyy,uuuu,iiii
2009-1-1, 8:00, ffff,dddd,ssss,aaaa

要求把相同的 日期时间的连成一行到一个文件，

类似：
1999-1-1,8:00,xxxx,cccc,bbbb,asdfa,adsf,fdsfd, sdfadsf,gadfdf,tttt,yyyy,uuuu,iiii

谢谢，着急

sunnyseckt

提供思路：

1、截取所有csv文件的日期并sort -u，这样得到所有csv文本的有效“日期”

2、以“日期”做循环，按顺序grep各个csv文件，用sed/awk处理获得去除“日期”剩余字串，合并字串输出。

iblicf

#!/bin/bash

cat a1 b1 |awk -F"," '{print $1,$2}'|sort|uniq|sed 's/ /,/g' >c1
while read line
do
num1=`grep "$line" a1|awk -F"," '{print $3,$4,$5,$6}'|sed 's/ /,/g'`
[ -z "$num1" ] && num1=0
num2=`grep "$line" b1|awk -F"," '{print $3,$4,$5,$6}'|sed 's/ /,/g'`
[ -z "$num2" ] && num2=0
echo "$line,$num1,$num2"
done <c1

moonjava

这个我做过极类似的，从很多个数据文件里按某列 合并到另一个文件生成一个结果！
用awk、grep做得
不过数据文件很大，都是很多G的，太慢了，后来把数据导入到数据库里，用sql 语句按某条件直接查出结果，

ly5066113

try:

awk -F, '{b=$1","$2;sub(/[^,]*,/,"");sub(/[^,]*,/,"");a=a?a","$00}END{for(i in a) print i","a}' *.csv

coxswain

用join 可以作，你注意到你写的这三个样本文件中，第一个文件前面不规范
a.csv------------------
1999-1-1 , 8:00, xxxx,cccc,bbbb
注意这里：1999-1-1 , 这里的逗号与前面的文字有个空格，而下面的文件中都没有，如果我们把这里改一下，保证所有文件这里都是统一的：
a.csv------------------
1999-1-1, 8:00, xxxx,cccc,bbbb

b.csv-----------------------------
1999-1-1, 8:00, asdfa,adsf,fdsfd, sdfadsf,gadfdf
2000-1-1, 9:00, hehe,haha,dfdf,dddd,gggg

c.csv-----------------------------
1999-1-1, 8:00, tttt,yyyy,uuuu,iiii
2009-1-1, 8:00, ffff,dddd,ssss,aaaa

在这样的前提下，join才好用：
# join  a.csv b.csv | join - c.csv