爱气象,爱气象家园! 

气象家园

 找回密码
 立即注册

QQ登录

只需一步,快速开始

新浪微博登陆

只需一步, 快速开始

搜索
查看: 3339|回复: 4

[经验总结] Pyhon+IDM加速下载ERA5代码+IDM安装教程(下载小时&月平均数据)

[复制链接]

新浪微博达人勋

发表于 2023-4-25 17:36:48 | 显示全部楼层 |阅读模式

登录后查看更多精彩内容~

您需要 登录 才可以下载或查看,没有帐号?立即注册 新浪微博登陆

x
本帖最后由 沉默的狙击手 于 2023-6-27 10:21 编辑

#在完成注册以及导入.cdsapirc文件后,直接复制粘贴代码,修改idm路径以及product_type和r = c.retrieve以及
#相关时间范围等变量,即可下载
import cdsapi
import calendar
from subprocess import call

def idmDownloader(task_url,folder_path,file_name):
    '''
    :param task_url: 下载任务地址
    :param folder_path: 存放文件夹
    :param file_name: 文件名
    :return:
    '''
#     IDM安装目录
    idm_engine = "C:\\Program Files (x86)\\Internet Download Manager\\IDMan.exe"
    # 将任务添加至队列
    call([idm_engine, '/d', task_url, '/p', folder_path, '/f', file_name, '/a'])
    # 开始任务队列
    call([idm_engine, '/s'])

c = cdsapi.Client() #创建用户

# 数据信心字典
dic = {
        'product_type': 'monthly_averaged_reanalysis', #产品类型
        'format': 'netcdf', #数据格式
        'variable': [
            'divergence',
            # 'geopotential',
            # 'ozone_mass_mixing_ratio',
            # 'potential_vorticity', 'temperature',
            # 'u_component_of_wind',
            # 'v_component_of_wind',
            # 'vertical_velocity'
            # 'specific humidity',
            # 'relative humidity'
            # 'geopotential',
            # 'temperature'#,'u_component_of_wind','u_component_of_wind'#变量名称
        ],
        'pressure_level': [
            # '1', '2', '3',
            # '5', '7', '10',
            # '20', '30', '50',
            # '70', '100', '125',
            # '150', '175', '200',
            # '225', '250', '300',
            # '350', '400', '450',
            '500',
            # '550', '600',
            # '650', '700', '750',
            # '775', '800', '825',
            # '850', '875', '900',
            # '925', '950', '975',
            # '1000',
            # '300','500'
        ],
    # 'pressure_level':['300','500','600'],
    'year': [],
    'month': [
                '01', '02', '03',
                '04', '05', '06',
                '07', '08', '09',
                '10', '11', '12',
            ],
    # 'day': [
    #             '01', '02', '03',
    #                         '04', '05', '06',
    #                         '07', '08', '09',
    #                         '10', '11', '12',
    #                         '13', '14', '15',
    #                         '16', '17', '18',
    #                         '19', '20', '21',
    #                         '22', '23', '24',
    #                         '25', '26', '27',
    #                         '28', '29', '30',
    #                         '31'
                # ],

    'time': [
            '00:00',
            # '06:00',
            # '12:00',
            # '18:00',
        ],
    # 'time': [
    #         '00:00', '01:00', '02:00',
    #         '03:00', '04:00', '05:00',
    #         '06:00', '07:00', '08:00',
    #         '09:00', '10:00', '11:00',
    #         '12:00', '13:00', '14:00',
    #         '15:00', '16:00', '17:00',
    #         '18:00', '19:00', '20:00',
    #         '21:00', '22:00', '23:00',
    #     ],
    'grid': '0.25/0.25', #直接下载是数据默认的精度,加上grid可以修改成想要的精度
    'area': [
            90, -180, 0,
            180,
        ],
}

for y in range(2018,2019):
    # for m in range(1,13):#月循环
    # day_num = calendar.monthrange(y,m)[1] #根据年月,获取当月日数
    dic['year'] = ['2000','2001','2002','2003','2004','2005',
                   '2006','2007','2008','2009','2010','2011',
                   '2012','2013','2014','2015','2016','2017',
                   '2018','2019','2020','2021']
        # dic['month'] = str(m).zfill(2)
        # dic['day'] = [str(d).zfill(2) for d in range(1,day_num+1)]
        # filename = 'G:\\PyCharm\\venv\\ERA5\\02-22 ERA5\\'\
        #             +str(y)+str(m).zfill(2)+'.nc' #文件存储路径
    r = c.retrieve('reanalysis-era5-land',dic)
    # month:reanalysis-era5-pressure-levels-monthly-means
    # hours:reanalysis-era5-pressure-levels
    url = r.location  # 获取文件下载地址
    path = 'D:\\'# 存放文件夹
        # filename = 'geopotential_'+str(y) + str(m).zfill(2) + '.nc'  # 文件名
    filename = str(y) +'.nc'  # 文件名
    idmDownloader(url, path, filename)  # 添加进IDM中下载

IDM.zip

11.54 MB, 下载次数: 49, 下载积分: 金钱 -5

售价: 1 贡献  [记录]

密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2023-4-25 19:47:14 | 显示全部楼层
r = c.retrieve('reanalysis-era5-land',dic)后就会自动下载吧 怎么取消自带的下载呢
密码修改失败请联系微信:mofangbao
回复 支持 反对

使用道具 举报

新浪微博达人勋

 楼主| 发表于 2023-4-25 19:55:22 | 显示全部楼层
淡水河 发表于 2023-4-25 19:47
r = c.retrieve('reanalysis-era5-land',dic)后就会自动下载吧 怎么取消自带的下载呢

它会先在欧洲中心那里排队,排好之后会自动调用IDM下载,不会出现自带的下载
密码修改失败请联系微信:mofangbao
回复 支持 反对

使用道具 举报

新浪微博达人勋

发表于 2024-4-15 17:44:38 | 显示全部楼层
报错指示找不到IDM.exe是怎么回事呀
密码修改失败请联系微信:mofangbao
回复 支持 反对

使用道具 举报

新浪微博达人勋

发表于 2024-7-25 21:03:54 | 显示全部楼层
请教大神,运行后提示
INFO Welcome to the CDS
INFO Sending request to https://cds.climate.copernicus.e ... -era5-single-levels
INFO Request is queued
INFO Request is running
是好了吗?需要设置IDM记住CDS网站密码吗
密码修改失败请联系微信:mofangbao
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

Copyright ©2011-2014 bbs.06climate.com All Rights Reserved.  Powered by Discuz! (京ICP-10201084)

本站信息均由会员发表,不代表气象家园立场,禁止在本站发表与国家法律相抵触言论

快速回复 返回顶部 返回列表