python下载ncep fnl资料

Anonymous888

使用requests模块下载fnl资料。以下源码只要输入邮箱及密码，更改下载时次及共多少个文件即可。

• # Author        : dfy
• # Created       : 21th June 2018
• #python version  : 3.*
• import requests
• import datetime
• def builtSession():
•     email = "***"                                        #此处改为注册邮箱
•     passwd = "***"                                      #此处为登陆密码
•     loginurl = "https://rda.ucar.edu/cgi-bin/login"
•     params = {"email":email, "password":passwd, "action":"login"}
•     sess = requests.session()
•     sess.post(loginurl,data=params)
•     return sess
• def download(sess, dt):
•     g1 = datetime.datetime(1999,7,30,18)
•     g2 = datetime.datetime(2007,12,6,12)
•     if dt >= g2:
•         suffix = "grib2"
•     elif dt >= g1 and dt <g2:
•         suffix = "grib1"
•     else:
•         raise StandardError("DateTime excess limit")
•     url = "http://rda.ucar.edu/data/ds083.2"
•     folder = "{}/{}/{}.{:0>2d}".format(suffix, dt.year, dt.year, dt.month)
•     filename = "fnl_{}.{}".format(dt.strftime('%Y%m%d_%H_00'), suffix)
•     fullurl = "/".join([url, folder, filename])
•     r = sess.get(fullurl)
•     with open(filename, "wb") as fw:
•         fw.write(r.content)
•     print(filename + " downloaded")
• if __name__ == '__main__':
•     print("downloading...")
•     s = builtSession()
•     for i in range(12):                                          #共下载多少个时次
•         startdt = datetime.datetime(2018, 5, 16, 0)  #开始时次
•         interval = datetime.timedelta(hours = i * 6)
•         dt =startdt + interval
•         download(s,dt)
•     print("download completed!")
  

   

hm_others

停在downloading。。。。不动，有人遇到这种情况吗？

dlxieyr

Anonymous888 发表于 2018-7-31 17:50
这个是权限限制，不能写文件。有两种方式解决：1.以管理员身份登录执行命令；2：切换工作目录到其他盘,执 ...

非常感谢，可以下了，但和前边那位的一样，下下来的都是32k。但我的账号和密码都是对的。也许也是IP的问题。还有没有固定IP下载也会出现都是32k。

Anonymous888

hekebetter 发表于 2018-7-2 17:34
为什么我下下来的文件都只有32K

我试了下，可以下载。出现你说的这种问题可能有两点原因：1.账户或者密码失效了；2.IP被封了。

尽头的尽头

感谢分享~~

ofly0127

挺实用的，谢谢楼主

ofly0127

运行的时候40-41行出错了。稍微改了一下可以正常运行。可能是datetime版本不同的原因？总之，多谢楼主分享。

        #interval = datetime.interval(hours = i * 6)
        interval = datetime.timedelta(hours=i * 6)
        dt=startdt+interval
        download(s,dt)

Anonymous888

ofly0127 发表于 2018-6-22 10:00
运行的时候40-41行出错了。稍微改了一下可以正常运行。可能是datetime版本不同的原因？总之，多谢楼主分享 ...

谢谢指出，这个是我的错误。确实是timedelta()，已在源代码中改正了！

曦尘

非常棒，谢谢分享。

平流层的萝卜

感谢楼主分享，这个是要学习一下的

Pilgrim

dt=startdt+interval  没有加上去

qxsdjt

没安装requests模块，pip install requests后搞定。确实很好用，感谢分享！

hekebetter

为什么我下下来的文件都只有32K