海洋气象数据 | 使用CDS-Beta下载ERA5数据

李知恩

（更新）
最近下载数据一直会遇到，数据下载下一半就断掉的问题，提示cdsapi需要更新
因此使用：pip install --upgrade cdsapi
更新cdsapi更新为0.7.2
Debug结束
记录一下

李知恩

更换了新的cdsapi库，甚至python也更新到了3.10版本，还是会遇到数据下载下一半就断掉的问题。。。。。这到底是什么原因呢？？
requests.exceptions.ChunkedEncodingError: ('Connection broken: IncompleteRead(30681600 bytes read, 107347769 more expected)', IncompleteRead(30681600 bytes read, 107347769 more expected))

李知恩

李知恩 发表于 2024-9-23 22:47
更换了新的cdsapi库，甚至python也更新到了3.10版本，还是会遇到数据下载下一半就断掉的问题。。。。。这到 ...

应该还是数据下载太多的原因，本地下载并没有影响，如果是超算的话可以提交到后台下载

lymtics6

那这个下载好的数据是储存在哪里呢

ZYZZZZZ

请问有人申请成功，但是下载失败的吗？
INFO status has been updated to successful
Recovering from connection error [HTTPSConnectionPool(host='object-store.os-api.cci2.ecmwf.int', port=443): Max retries exceeded with url: /cci2-prod-cache/275167e42484d98ea53434c98d481f0c.nc (Caused by ConnectTimeoutError(<urllib3.connection.HTTPSConnection object at 0x14e313618880>, 'Connection to object-store.os-api.cci2.ecmwf.int timed out. (connect timeout=60)'))], attemps 1 of 500
Retrying in 120 seconds

李知恩

是的，我本地下载会遇到这些问题，就算是官网给的脚本也有，建议还是提交到超算上面去下载数据

李知恩

lymtics6 发表于 2024-9-29 21:23
那这个下载好的数据是储存在哪里呢

如果没有标注下载路径的话，储存到你的代码所在的路径下

李知恩

ZYZZZZZ 发表于 2024-9-30 22:12
请问有人申请成功，但是下载失败的吗？
INFO status has been updated to successful
Recovering from co ...

是的，我本地下载会遇到这些问题，就算是官网给的脚本也有，建议还是提交到超算上面去下载数据

ZYZZZZZ

李知恩 发表于 2024-10-1 08:50
是的，我本地下载会遇到这些问题，就算是官网给的脚本也有，建议还是提交到超算上面去下载数据

在集群上下载的