python爬虫爬取中央气象台每日天气图

heshuya

QCD 发表于 2022-1-4 16:30
这个方法不咋样，明明可以直接拼接url来获取，那个图片的网址是固定，比如1月3日的08时图片http://image.nm ...

这样只能取一张图，每张图的url不一样，并且没有很好抓的规律，我开头写了

heshuya

QCD 发表于 2022-1-4 16:33
selenium干这种任务有点笨重

确实，但是目前我也没有找到更合适的方法

angrycar

heshuya 发表于 2022-1-4 18:30
那样只能实现一张图，我开头写了

不是啊，直接用datetime或者time库构造url链接

angrycar

heshuya 发表于 2022-1-4 18:30
那样只能实现一张图，我开头写了

weatherchart_h1000_url = 'http://image.nmc.cn/product/{0}/WESA/SEVP_NMC_WESA_SFER_EGH_ACWP_L00_P9_{1}0000000.jpg'
yestodayl = (datetime.datetime.now() + datetime.timedelta(hours=-11)).strftime("%Y/%m/%d/%H")
url = weatherchart_h1000_url.format(yestodayl[0:10],yestodayl.replace('/',''))

QCD

heshuya 发表于 2022-1-4 18:33
这样只能取一张图，每张图的url不一样，并且没有很好抓的规律，我开头写了

这已经够规律了，年月日小时产品简写关键要素都有了，参照angrycar给你构造的url命名方式。selenium不是用来做这个的，如果只是爬取nmc的图片，selenium这种方式效率太低。

晋陵小生

https://mp.weixin.qq.com/s/oCv7Bn5APVUI0SW2up9GdQ     

参考下这个链接，不需要去凑url，直接把官网上现有的图片全部拉下来