Grib2数据文件并行程序下载

yuanguang

本人想使用并行编程技术设计一款数据下载的软件。最近测试了下从ftpprd.ncep.noaa.gov下载Grib2文件，测试结果是2分钟左右能下栽2个文件（在普通台式机上，物理内核4个，逻辑8个）。如果用心做下去，能够实现10分钟左右下载从00到102的30+个文件，不知道有没有这个需求。

兰溪之水

楼主可以做出来看看效果如何~

kc121

相当的有需求！做预测预报都要用到这资料，这资料好呀，可惜一直应用不起来。我就想要这方面的工具，可惜一直没有，要是楼主能教下，或是共享一下就好了。

531581463

请教楼主，你下载的Grib2文件在wrf里运行正常吗？我也在下载Grib2文件，但是在wrf里运行出问题了，出不来结果、、想请问楼主可以帮我解决吗？
[root@qy run]# mpirun -n 4 ./wrf.exe
starting wrf task             0  of             4
starting wrf task             3  of             4
starting wrf task             1  of             4
starting wrf task             2  of             4
rank 2 in job 1  qy_47981   caused collective abort of all ranks
  exit status of rank 2: killed by signal 9
rank 1 in job 1  qy_47981   caused collective abort of all ranks
  exit status of rank 1: return code 1

147

迫切需要这样的软件！每次下载grib2文件花的时间都好长

yuanguang

      我只是在并行编程技术环境下做了一些文件下载的测试，没有完整的下载某个时次的文件，也没有放到模式中转过。如果真有这种需求，我倒可以花点功夫做一个，主要是想让他能够成为一个业务化的下载软件。当然完成后可以免费给大家软件及说明文档。
      

531581463

147 发表于 2014-2-27 18:44

                               
登录/注册后可看大图

迫切需要这样的软件！每次下载grib2文件花的时间都好长

请问你下载完grib2文件，是在wrf里成功运行了吗？谢谢回复，感激不尽

147

531581463 发表于 2014-2-27 22:03

                               
登录/注册后可看大图

请问你下载完grib2文件，是在wrf里成功运行了吗？谢谢回复，感激不尽

成功了，grib2文件需要WPS编译的时候选择非“no grib2”的选项，为了成功，还需要提前安装zlib，libpng，jasper

147

yuanguang 发表于 2014-2-27 19:14

                               
登录/注册后可看大图

我只是在并行编程技术环境下做了一些文件下载的测试，没有完整的下载某个时次的文件，也没有放到模式 ...

非常支持你的这个做法，祝楼主顺利。你做出来后，不管收费与否，我都想试一下，成功后请联系我。谢谢~

yuanguang

每个下载的Grib2文件有16M左右，应该没问题。之前程序还没达到目前的效率时手动下载过一个时次的所有文件，在WRF中用过，没见异常。