高效读入数据的一种方法sasfile

首先，sasfile statement语法为

SASFILE <libref.>member-name<.member-type> <(password-option(s))> OPEN | LOAD | CLOSE ;

该语句提高效率的原理是将数据一次性读入缓存内，避免了data步中反复地对数据读取或关闭，也减少了input/output操作。

需要特别注意的是，如果数据太大，打到缓存无法容纳的程度，该语句不再适合，容易造成sas崩溃等不良后果。

sasfile应用见下例：

libname yugao 'c:/books';

data yugao.test;
   do i=1 to 1000000;
      nums=i;
      chars='abcde';
      output;
   end;
run;
*****数据读入存储空间*****;
sasfile yugao.test.data load;
***** set依观察值连续读入*****;
data _null_;
   set yugao.test;
run;
***** 随机读取*****;
data _null_;
   n=round(ranuni(1) * 1000000);
   set yugao.test point=n;
   if _N_=10000 then stop;
run;
***** 有条件读取*****;
data _null_;
   set yugao.test;
   where nums > 500000;
run;
***** 释放内存 *****;
sasfile yugao.test.data close;

 

参考：

http://support.sas.com/documentation/cdl/en/lrdict/64316/HTML/default/viewer.htm#a001500739.htm

 

http://support.sas.com/kb/24/958.html