function libname(dsn)
{
i = index(dsn, ".");
if (i > 0) {
tmp = substr(dsn, 1, i - 1);
}
else {
tmp = "WORK";
}
return toupper(tmp);
}
function memname(dsn)
{
i = index(dsn, ".");
if (i > 0) {
tmp = substr(dsn, i + 1, length(dsn));
}
else {
tmp = dsn;
}
return toupper(tmp);
}
function ilog(path, dsn)
{
printf("R,%s,%s,%d,%s,%d\n", path, dsn, FNR, FILENAME, NR);
return 1;
}
function olog(path, dsn)
{
printf("W,%s,%s,%d,%s,%d\n", path, dsn, FNR, FILENAME, NR);
return 1;
}
/NOTE: ライブラリ参照名/ && /を次のように割り当てました。/ {
libref = $3;
getline;
while ($1 != "物理名") {
getline;
}
lib[libref] = $3;
}
$1 ~ /NOTE:/ && $2 ~ /データセット/ && $NF ~ /オブザベーションを読み込みました。/ {
dsn = $3;
libref = libname(dsn);
mem = memname(dsn);
if (libref != "WORK" && libref != "SASHELP") {
dir = lib[libref];
if (dir != "") {
tmp = sprintf("%s/%s.sas7bdat", dir, tolower(mem));
status = ilog(tmp, dsn);
}
else {
printf("ERROR %s\n", dsn);
exit;
}
}
}
$1 ~ /NOTE:/ && $2 ~ /データセット/ && $NF ~ /変数です。/ {
dsn = $3;
libref = libname(dsn);
mem = memname(dsn);
if (libref != "WORK" && libref != "SASHELP") {
dir = lib[libref];
if (dir != "") {
tmp = sprintf("%s/%s.sas7bdat", dir, tolower(mem));
status = olog(tmp, dsn);
}
else {
printf("ERROR %s\n", dsn);
exit;
}
}
}
$1 ~ /MPRINT\([A-Z0-9_]+\):/ && $2 ~ /^set$/ {
match($3, /([a-zA-Z0-9_]+\.)?[a-zA-Z0-9_]+/);
if (RLENGTH > 0) {
dsn = substr($3, RSTART, RLENGTH);
libref = libname(dsn);
mem = memname(dsn);
if (libref != "WORK" && libref != "SASHELP") {
dir = lib[libref];
if (dir != "") {
tmp = sprintf("%s/%s.sas7bdat", dir, tolower(mem));
status = ilog(tmp, dsn);
}
else {
printf("ERROR %s\n", dsn);
exit;
}
}
}
}
END {
print "_EOF_";
}
SASプログラムとログを解析するユーティリティを開発するための備忘録です。This is a memo to develop utility that analyzes the SAS log.
2013年8月15日木曜日
データセットのI/Oを補足するコード(私家版#2)
これ自分用のコードです。
SASデータセットのI/Oを捕捉するコード(私家版)
SASログからI/Oを追いかける私家版のSASプログラム。入力のCSVファイルはAWKで作成しています。お客様先で大量のSASログから、入力と出力を特定するためのものです。入力ファイルで1件もデータを読まないで、僅かにMPRINTのログにしか手掛かりがないものが厄介です。
その他に、SASHELP.VTABLEを通してファイルの存在チェックをしているものなど、SASログには現れない入力があります。
その他に、SASHELP.VTABLEを通してファイルの存在チェックをしているものなど、SASログには現れない入力があります。
/* *++ * import io log-file *-- */ data iods; infile "c:\temp\iods.csv" dsd firstobs=2; attrib RW length=$1; attrib FILENAME length=$64; attrib DSN length=$32; attrib FNR length=8; attrib LOG length=$61; attrib NR length=8; input rw filename dsn fnr log nr; run; /* *++ * input data-set *-- */ proc sort data=iods out=ids; by filename nr rw; run; data ids; set ids; by filename nr rw; if first.filename and rw eq 'R' then output; run; proc sort data=ids; by nr; run; /* *++ * output data-set *-- */ proc sort data=iods out=ods; where rw eq 'W'; by filename nr; run; data ods; set ods; by filename nr; if last.filename then output; run; proc sort data=ods; by nr; run; /* *++ * make compare procedure statement *-- */ data _null_; set ods; attrib comment length=$256; attrib libstat length=$256; attrib titstat length=$256; attrib comproc length=$256; attrib mem length=$32; basedir = "/sumdata/bk02"; comment = "/* dsn=" || compress(upcase(dsn)) || " logfile=" || compress(log) || " line=" || compress(put(fnr, best.)) || " */"; put comment; i = 1; imax = length(filename); pos = 0; do i=1 to imax; if substr(filename, i, 1) eq '/' then pos = i; end; put "options nocenter;"; libstat = "libname tmp1 '" || compress(basedir) || substr(filename, 1, pos-1) || "' access=readonly;"; put libstat; libstat = "libname tmp2 '" || substr(filename, 1, pos-1) || "' access=readonly;"; put libstat; titstat = "title 'dsn=" || compress(upcase(dsn)) || " log=" || compress(log) || "';"; put titstat; mem = substr(dsn, index(dsn, ".")+1); comproc = "proc compare base=tmp1." || compress(mem) || " compare=tmp2." || compress(mem) || " maxprint=5;"; put comproc; put "run;"; put "title;"; put ; run;
登録:
コメント
(
Atom
)