stormctr2's questions

我有一个 CSV 文件（带有时间戳数据），我有一个脚本，可以将一年中的每个月分成一个单独的文件。该脚本将花费该月并将数据平均为单个值。部分代码如下；所有其他月份将与一月份的第一个月份相同。该代码将根据第 9 列（月份编号为 1-12）将长达一年的文件分成月份，并将打印所有 17 个字段。下一个代码行是查看第 13 列并平均文件中的所有数据（忽略所有丢失的数据，指定为 -999）并将列平均值打印到新的 $i.monthlyavg 文件。

awk -F ',' '$9= 1 {print $0}' $i > Jan.tmp
awk 'NR > 1 { for i = 13) if ($i != -999) {sum[i] += $i; num[i]++}
END { for (i = 13) print i, sum[i], num[i], sum[i]/num[i] }' Jan.tmp > $i.monthlyavg

我收到以下错误消息.....

awk: cmd. line:1: NR > 1 { for i = 13) if (01-073-1003-SO2-1998.dat.out != -999) {sum[i] += 01-073-1003-SO2-1998.dat.out; num[i]++}
awk: cmd. line:1:              ^ syntax error
awk: cmd. line:1: NR > 1 { for i = 13) if (01-073-1003-SO2-1998.dat.out != -999) {sum[i] += 01-073-1003-SO2-1998.dat.out; num[i]++}
awk: cmd. line:1:                    ^ syntax error
awk: cmd. line:1: NR > 1 { for i = 13) if (01-073-1003-SO2-1998.dat.out != -999) {sum[i] += 01-073-1003-SO2-1998.dat.out; num[i]++}
awk: cmd. line:1:                                                  ^ syntax error
awk: cmd. line:1: NR > 1 { for i = 13) if (01-073-1003-SO2-1998.dat.out != -999) {sum[i] += 01-073-1003-SO2-1998.dat.out; num[i]++}
awk: cmd. line:1:                                                              ^ syntax error
awk: cmd. line:1: NR > 1 { for i = 13) if (01-073-1003-SO2-1998.dat.out != -999) {sum[i] += 01-073-1003-SO2-1998.dat.out; num[i]++}
awk: cmd. line:1:                                                                                                   ^ syntax error

和

 END { for (i = 13) print i, sum[i], num[i], sum[i]/num[i] }
awk: cmd. line:2:       ^ syntax error
awk: cmd. line:2:       END { for (i = 13) print i, sum[i], num[i], sum[i]/num[i] }
awk: cmd. line:2:                        ^ syntax error
awk: cmd. line:2:       END { for (i = 13) print i, sum[i], num[i], sum[i]/num[i] }
awk: cmd. line:2:                                                                  ^ unexpected newline or end of string

问题是什么？

我有两组文件，它们试图合并到一个文件中并填写相关的缺失数据。

文件都是,分隔的

第一个文件包含 13 列，第 8 列包含YYYY-MM-DD格式的日期（注意：此文件缺少 44 天。第二个文件是 2 列，第一个是完整的日历年（闰年 366 天）YYYY-MM-DD格式，而第二个是相关的儒略日期值。

缺少天数的示例文件 #1

06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-26,Parts-per-million,24,100.0,0.379167,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-27,Parts-per-million,24,100.0,0.2875,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-28,Parts-per-million,11,46.0,0.163636,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-30,Parts-per-million,20,83.0,0.23,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-31,Parts-per-million,24,100.0,0.195833,10

我尝试使用以下命令来尝试将文件合并在一起并创建一个包含 14 列的新文件，因为填写了缺失的日期并添加了儒略日期。我还在寻找代码以从初始文件中自动填充第 1-7 列和第 9 列的固定值，并在-999缺少此数据的情况下填充第 10-13 列。

awk -F ',' 'NR==FNR {h[$1] = $14; next} {print $1,$2,$3,$4,$5,$6,$7,$8,h[$2],$9,$10,$11,$12,$13}' temp2.tmp temp1.tmp  > temp3.tmp

06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-26,26,Parts-per-million,24,100.0,0.379167,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-27,27,Parts-per-million,24,100.0,0.2875,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-28,28,Parts-per-million,11,46.0,0.163636,10
**06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-29,29,Parts-per-million,-999,-999,-999,-999**
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-30,30,Parts-per-million,20,83.0,0.23,10
06,037,0016,42101,34.14435,-117.85036,1-HOUR,2020-01-31,31,Parts-per-million,24,100.0,0.195833,10

我有一个bash脚本，它应该通过一系列文件文本文件。我已经编写了一个for循环来自动为我完成这项工作，但是当脚本运行时我没有得到任何输出文件。

我尝试了在网上找到的各种单行命令，但没有运气。我希望按“年”打破这些大文件。有什么建议么？

#!/usr/awk -f
        for i in *yyyymm.txt
        do
#       {FS = "," }
        awk -F "," 'BEGIN '$1 == 2002'END{ print $0 }' $i > "$i"-2002.dat
        gawk '$ 1==2002 { print $0 }' "$i" > "$i"-2002.dat
        awk '/2002/' "$i" > "$i"-2002.dat 

我正在尝试合并两组数据

file1 是一个数字儒略日期文本文件，最多 366 个，用于同时考虑闰年和非闰年。

1
2
3
4
5
6
7
8
9
10

文件 2 是一个数据集，其中包含一年中的各种缺失天数

1 0.055980045
4 0.026198495
6 0.063033253
8 0.079462815

我正在尝试创建一个看起来像这样的文件 3

1 0.055980045
2
3
4 0.026198495
5
6 0.063033253
7
8 0.079462815
9
10

我尝试了许多命令sort，grep但未能完成此操作。有什么建议么