#!/usr/bin/env bash
mkdir /home/cookies/data
for((i=1901;i<=2013;i++));
do
cd /home/cookies/data/
mkdir $i
cd $i
wget -r -np -nH .cut-dirs=3 -R index.html http://ftp3.ncdc.noaa.gov/pub/data/noaa/$i/
cd pub/data/noaa/$i/
cp *.gz /home/cookies/data/$i
cd /home/cookies/data/
rm -r $i/pub/
done
Hadoop ncdc数据下载
最新推荐文章于 2024-01-15 16:45:00 发布