请选择 进入手机版 | 继续访问电脑版
爱气象,爱气象家园! 

气象家园

 找回密码
 立即注册

QQ登录

只需一步,快速开始

新浪微博登陆

只需一步, 快速开始

搜索
查看: 3960|回复: 10

[grib] Grib2数据文件并行程序下载

[复制链接]

新浪微博达人勋

发表于 2014-2-27 12:43:08 | 显示全部楼层 |阅读模式

登录后查看更多精彩内容~

您需要 登录 才可以下载或查看,没有帐号?立即注册 新浪微博登陆

x
本人想使用并行编程技术设计一款数据下载的软件。最近测试了下从ftpprd.ncep.noaa.gov下载Grib2文件,测试结果是2分钟左右能下栽2个文件(在普通台式机上,物理内核4个,逻辑8个)。如果用心做下去,能够实现10分钟左右下载从00到102的30+个文件,不知道有没有这个需求。
密码修改失败请联系微信:mofangbao

新浪微博达人勋

 成长值: 19710
发表于 2014-2-27 13:31:40 | 显示全部楼层
楼主可以做出来看看效果如何~
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 16:34:34 | 显示全部楼层
相当的有需求!做预测预报都要用到这资料,这资料好呀,可惜一直应用不起来。我就想要这方面的工具,可惜一直没有,要是楼主能教下,或是共享一下就好了。
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 18:36:05 | 显示全部楼层
请教楼主,你下载的Grib2文件在wrf里运行正常吗?我也在下载Grib2文件,但是在wrf里运行出问题了,出不来结果、、想请问楼主可以帮我解决吗?
[root@qy run]# mpirun -n 4 ./wrf.exe
starting wrf task             0  of             4
starting wrf task             3  of             4
starting wrf task             1  of             4
starting wrf task             2  of             4
rank 2 in job 1  qy_47981   caused collective abort of all ranks
  exit status of rank 2: killed by signal 9
rank 1 in job 1  qy_47981   caused collective abort of all ranks
  exit status of rank 1: return code 1
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 18:44:05 | 显示全部楼层
迫切需要这样的软件!每次下载grib2文件花的时间都好长
密码修改失败请联系微信:mofangbao

新浪微博达人勋

 楼主| 发表于 2014-2-27 19:14:07 | 显示全部楼层
      我只是在并行编程技术环境下做了一些文件下载的测试,没有完整的下载某个时次的文件,也没有放到模式中转过。如果真有这种需求,我倒可以花点功夫做一个,主要是想让他能够成为一个业务化的下载软件。当然完成后可以免费给大家软件及说明文档。
      
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 22:03:09 | 显示全部楼层
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 23:26:56 | 显示全部楼层
531581463 发表于 2014-2-27 22:03
请问你下载完grib2文件,是在wrf里成功运行了吗?谢谢回复,感激不尽

成功了,grib2文件需要WPS编译的时候选择非“no grib2”的选项,为了成功,还需要提前安装zlib,libpng,jasper
密码修改失败请联系微信:mofangbao

新浪微博达人勋

发表于 2014-2-27 23:28:25 | 显示全部楼层
yuanguang 发表于 2014-2-27 19:14
我只是在并行编程技术环境下做了一些文件下载的测试,没有完整的下载某个时次的文件,也没有放到模式 ...

非常支持你的这个做法,祝楼主顺利。你做出来后,不管收费与否,我都想试一下,成功后请联系我。谢谢~
密码修改失败请联系微信:mofangbao

新浪微博达人勋

 楼主| 发表于 2014-2-27 23:33:03 | 显示全部楼层
每个下载的Grib2文件有16M左右,应该没问题。之前程序还没达到目前的效率时手动下载过一个时次的所有文件,在WRF中用过,没见异常。
密码修改失败请联系微信:mofangbao
您需要登录后才可以回帖 登录 | 立即注册 新浪微博登陆

本版积分规则

Copyright ©2011-2014 bbs.06climate.com All Rights Reserved.  Powered by Discuz! (京ICP-10201084)

本站信息均由会员发表,不代表气象家园立场,禁止在本站发表与国家法律相抵触言论

快速回复 返回顶部 返回列表