Как я могу получить значение md5sum для моего имени файла
Я могу разбить очень большой файл с помощью awk, как это.
awk -F, '{print $0 >> ($3"|"substr($1,1,10)"|"$6"|"$4"|"$5".csv")}' /largefile.csv
который создает файлы с такими именами, как
SPX|2018-03-20|C|2018-04-20|1000.csv
Но то, что я действительно хочу, это md5sum 'SPX|2018-03-20|C|2018-04-20|1000'
чтобы получить что-то вроде e560d68e36bbc627efabcdee5ac328b9
и, наконец, форматировать к этому
E/56/0d68E36BbBC627EFABCDEe5AC328B9.csv
Я проверил эту строку и могу правильно распечатать cmd
awk -F, '{key=$3"|"substr($1,1,10)"|"$6"|"$4"|"$5".csv"; cmd="md5sum \47"key"\47"; print cmd}' /largefile.csv
Но я просто не могу получить hashName... Я пробовал эту строку, но она дает мне содержимое большого файла.
awk -F, '{key=$3"|"substr($1,1,10)"|"$6"|"$4"|"$5".csv"; cmd="md5sum \47"key"\47" cmd | getline; hashName=$0; print hashName}'
Как я могу получить HashName и если вы не возражаете, вставьте два '/', как это E/56/0d68E36BbBC627EFABCDEe5AC328B9.csv
,
Спасибо!
вот 5 примеров строк из моего Largefile.csv
2018-03-20 09:30:00,9327,SPX,2018-04-20,1000,C,E,SPX 180420C01000000,1712.7,1724.2,2018-03-19 16:02:00,2018-03-19 16:02:00,5,4,W,W,0,1.6005,2712.9199,0.98902,0.00002,-0.417058,0.20079,0.8415,-1,,2018-03-20 09:26:00,2018-03-20 09:30:00
2018-03-20 09:31:00,9327,SPX,2018-04-20,1000,C,E,SPX 180420C01000000,1711.6,1723.1,2018-03-20 09:30:11,2018-03-20 09:30:11,50,49,W,W,0,1.0127,2717.1299,0.99819,0.000001,0,0.00611,0.84745,-1,,2018-03-20 09:30:37,2018-03-20 09:31:00
2018-03-20 09:32:00,9327,SPX,2018-04-20,1000,C,E,SPX 180420C01000000,1714.6,1726.1,2018-03-20 09:31:29,2018-03-20 09:31:29,50,49,W,W,0,0.9711,2720.52,0.99828,0.000001,0,0.00365,0.84765,-1,,2018-03-20 09:31:42,2018-03-20 09:32:00
2018-03-20 09:33:00,9327,SPX,2018-04-20,1000,C,E,SPX 180420C01000000,1713.7,1725.2,2018-03-20 09:32:03,2018-03-20 09:32:03,50,49,W,W,0,0.9674,2720.23,0.99829,0.000001,0,0.00348,0.84764,-1,,2018-03-20 09:32:46,2018-03-20 09:33:00
2018-03-20 09:34:00,9327,SPX,2018-04-20,1000,C,E,SPX 180420C01000000,1713.1,1724.3,2018-03-20 09:33:23,2018-03-20 09:33:23,50,49,W,W,0,0.9494,2719.75,0.99831,0,0,0.00274,0.84769,-1,,2018-03-20 09:33:39,2018-03-20 09:34:00
1 ответ
Что -то вроде этого?
$ seq 3 | awk '{key=$0 # use your key here
cmd="echo " key "| md5sum";
cmd | getline line;
sub(/ .*/,"",line);
print (substr(line,1,1) "/" substr(line,2,2) "/" substr(line,3)".csv")}'
b/02/26324c6904b2a9cb4b88d6d61c81d1.csv
2/6a/ab0db90d72e28ad0ba1e22ee510510.csv
6/d7/7fce9fee471194aa8b5b6e47267f03.csv
однако, чтобы использовать их в качестве путей к файлам, вам нужно создавать подкаталоги отдельно.