批量下载NASA GPM数据的一点经验

Kaltima

批量下载NASA GPM数据的一点经验
前提假定已经申请有了nasa的账号，并且已登录。然后就可以进入网址https://pmm.nasa.gov/precipitation-measurement-missions下载GPM卫星数据，点击access data——>GPM，本人要下载的是三级产品的0.1*0.1-30min的降雨数据，格式选择了NC格式。
然后在设置页面，选好自已要下载的时间和空间范围。
提交后进入下一级页面，选择需要下载的数据变量，本人选择的是“precipitationCal”
点提交后等一会，再点击绿色的向下箭头，弹出下载文件列表
这时候，你可以一个一个手点下载自已需要的文件，但效率很低，所以就需要采用批量下载了
在下载列表的最上方，有一个“ list of URLs ”的选项，点进去可以得到所有文件的下载地址
旁边的(Downloading instructions)下载帮助说明中，推荐使用火狐的downthemall插件进行下载，本人尝试过，将文件地址全部粘入downthemall插件后，可以实现自动下载，但问题是，downthemall会自动下载完整的全球范围的nc文件，这样下载的量就太大了，我需要的范围只有一小块。
这时候，可以借助谷歌浏览器的第三方开发插件urlopen.crx，下载网址http://werun.cn/chrome-urlopen.htm?tdsourcetag=s_pctim_aiomsg，如何安装.crx文件，在下载网址里边都有详细说明，按步骤一步步来就行了。
在这个小插件内，可以设置打开网页的时间间隔，打开网页后隔多少秒自动关闭（如果不关闭，打开太多页面计算机会承受不住）
然后点击开始，就可以顺利的进行批量下载了（软件里边设定了限制一次只能开30个网页，我们可以打开background.js文件，把30改为10000,就可以解决了）。

参考资料：
http://blog.sina.com.cn/s/blog_b3fc09530102xiuz.html
https://www.jb51.net/article/107290.htm
http://werun.cn/chrome-urlopen.htm?tdsourcetag=s_pctim_aiomsg

LJ512

正好要用，太感谢楼主了

LJ512

请问楼主Latency是是什么意思？下面的4 hours (NRT / Early Run)，12hours (NRT / Early Run)，2.5 months (NRT / Early Run)有什么区别？

Kaltima

LJ512 发表于 2018-11-7 21:17
请问楼主Latency是是什么意思？下面的4 hours (NRT / Early Run)，12hours (NRT / Early Run)，2.5 months  ...

延迟的意思吧，三个产品分别延迟4小时，12小时和2.5月

LJ512

您好，请问可以加您的QQ吗？我批量下载，将30改为1000，但是还是只能下载30次

Kaltima

LJ512 发表于 2018-11-8 09:16
您好，请问可以加您的QQ吗？我批量下载，将30改为1000，但是还是只能下载30次

你好，30改为10000后，把原来加载的插件先移除，再重新加载一次试试？

LJ512

Kaltima 发表于 2018-11-8 11:16
你好，30改为10000后，把原来加载的插件先移除，再重新加载一次试试？

非常感谢，重新加载插件就好了

Lily311311

您好，我用火狐浏览器为什么说我网络错误呢

sevens

楼主好厉害！感谢你啦！

sevens

楼楼我background.js这个东东打不开，改不了打开网页数量怎么肥四鸭