wgetのオプション覚書

-r　　　　　　　ディレクトリ階層をたどってダウンロード
-np　　　　　　 親ディレクトリは無視
-erobots=off 　robot.txtを回避