military - Cómo combinar varios archivos csv en un único conjunto de datos con SAS

sas software

Question

Tengo ~ 2300 archivos CSV y el nombre de la columna colunm 1 es diferente para cada archivo CSV. Quiero fusionar todos los archivos por panelistID (colunm 2) y ejecutar frecuencias en la columna 1 para obtener la frecuencia de cada archivo CSV. Por favor alguien puede ayudar?

A continuación, ejemplo de diseño de archivos:

File1
mat1_pen1, panelistID
0, 10075001
20, 10086001
44, 10086002
10, 10096001
File2
mat2_pen2, panelistID
74, 10118002
40, 10118003
77, 10128001
77, 10128003
file 3
mat3_pen4, panelistID
77, 10128003
51, 10137001
0, 10148001
0, 10148002
0, 10157001

Answer 1

Simplemente use un comodín en la instrucción de infile para leer en todos los archivos, y la opción filename= para almacenar el archivo actual en una variable temporal _f , almacenándolo en f .

Luego manipule f y var consecuencia.

data big ; length _f f $256. ; infile "*.csv" truncover filename=_f dlm='','' ; f = _f ; input var panellistID ; run ;

Answer 2

filename mycsv "*.csv";
data mydataset(drop=tmp);
infile mycsv dsd dlm='','' eov=eov;
retain mat_pen_id;
if _n_ = 1 or eov then do; *when using wildcard-concatenated input files, ;
input mat_pen_id $20. tmp $20.; *eov is true for first line of second file.;
eov = 0;
else do; * _n_ =1 is true for first line of first file only;
input mat_pen panelistID;
end;
run;
proc sort data= mydataset;
by panelistID;
run;
proc transpose
data=mydataset out=wide_data;
by panelistID;
id mat_pen_id;
var mat_pen;
run;
proc print data=wide_data;
run;

Esto le dará un conjunto de datos llamado wide_data como:

obs panelistID mat1_pen1 mat2_pen2 mat3_pen3 etc
1 10075001 0 22 33