docs: Python 脚本实现爬取疫情数据并用 Markdown 预览

Chapter3 - Server/3.9.md

@@ -0,0 +1,106 @@
+#  爬取疫情数据并用 Markdown 预览
+
+> 周五不困，无聊写了一个 Python 脚本，功能很简单：获取新浪关于各个国家疫情数据，并写入 md 文件并预览，定时去获取数据，有新数据则生成新的 markdown 内容拼接在文件最后。
+
+
+
+
+## 一、 代码
+
+由于功能和代码都很简单，直接上代码
+
+```Python
+# -*-coding:utf8-*-
+import re,requests,json,pprint,time
+import os
+
+pattern=re.compile(r'^try{sinajp_15844213244528328543098388435\((.*?)\);}catch\(e\){};')
+lasttimes='00:00:00'
+
+while True:
+    res=requests.get('https://gwpre.sina.cn/ncp/foreign?_=1584421324452&callback=sinajp_15844213244528328543098388435')
+    match=pattern.search(res.text)
+
+    if match:
+        obj=json.loads(match.group(1))
+        resultObj=obj['result']
+        times=resultObj['times']  # 截止时间
+        timesMatch=re.search(r'截至(\d{2})月(\d{2})日(\d{2})时(\d{2})分',times)
+        if timesMatch:
+            times=timesMatch.group(1)+'月'+timesMatch.group(2)+'日 '+timesMatch.group(3)+':'+timesMatch.group(4)
+        
+        if times==lasttimes:
+            continue
+        else:
+            lasttimes=times
+            totalObj=resultObj['total']
+            certain=totalObj['certain'] # 累计确诊
+            die=totalObj['die']   # 死亡
+            recure=totalObj['recure'] # 治愈
+            certain_inc=totalObj['certain_inc'] # 确诊增加
+            die_inc=totalObj['die_inc'] # 死亡增加
+            recure_inc=totalObj['recure_inc'] # 治愈增加
+            # 各国数据列表
+            worldlistArr=resultObj['worldlist']
+            worldlistArr.sort(key=lambda x: int(x.get('conNum','0')),reverse=True)
+            
+            fo=open('./coronavirus.md','a')
+            fo.writelines('\n# '+times+'\n')
+            fo.writelines('感染国家总数：'+str(len(worldlistArr))+'\n')
+            fo.writelines('```\n累计确诊：'+certain.rjust(10,' ')+' 较昨日：'+certain_inc+'\n'+'累计死亡：'+die.rjust(10,' ')+' 较昨日：'+die_inc+'\n'+'累计治愈：'+recure.rjust(10,' ')+' 较昨日：'+recure_inc+'\n```\n')
+
+            fo.writelines('|国家|新增确诊|累计确诊|新增死亡|累计死亡|累计治愈|'+'\n')
+            fo.writelines('|:--:|---:|---:|---:|---:|---:|'+'\n')
+
+            top15=worldlistArr[:15]
+            pattient_countrys=['澳大利亚','加拿大','巴西','印度','丹麦','越南','新加坡','俄罗斯','塞尔维亚','巴基斯坦',]
+            pattient=[c for c in worldlistArr if c['name'] in pattient_countrys]
+
+            for countryObj in top15:
+                name=countryObj['name'] # 国家
+                if name=='中国':
+                    continue
+                conadd=countryObj['conadd'] # 新增确诊
+                conNum=countryObj['conNum'] # 累计确诊
+                deathadd=countryObj['deathadd'] # 新增死亡
+                deathNum=countryObj['deathNum'] # 累计死亡
+                cureNum=countryObj['cureNum'] # 累计治愈
+                fo.writelines('|'+name+'|'+conadd+'|'+conNum+'|'+deathadd+'|'+deathNum+'|'+cureNum+'|\n')
+
+            fo.writelines('\n特别关心'+'\n')
+            fo.writelines('|国家|新增确诊|累计确诊|新增死亡|累计死亡|累计治愈|'+'\n')
+            fo.writelines('|:--:|---:|---:|---:|---:|---:|'+'\n')
+            for countryObj in pattient:
+                name=countryObj['name'] # 国家
+                conadd=countryObj['conadd'] # 新增确诊
+                conNum=countryObj['conNum'] # 累计确诊
+                deathadd=countryObj['deathadd'] # 新增死亡
+                deathNum=countryObj['deathNum'] # 累计死亡
+                cureNum=countryObj['cureNum'] # 累计治愈
+                fo.writelines('|'+name+'|'+conadd+'|'+conNum+'|'+deathadd+'|'+deathNum+'|'+cureNum+'|\n')
+            fo.close()
+    
+    # 用 Markdown IDE 打开 .md 文件进行预览
+    os.system('open -a "/Applications/Typora.app" ./coronavirus.md')
+
+    for i in range(1,61):
+        time.sleep(10)
+        print(i*10)2
+```
+
+
+
+
+## 二、 如何使用
+
+1. 安装 requests
+```shell
+pip3 install requests
+```
+
+2. 修改 Markdown 的打开方式。由于我电脑安装 Marodown 编辑器是 `Typora`，所以脚本是 `open -a "/Applications/Typora.app" ./coronavirus.md`。修改这里的 `***.app` 为自己的 ide
+
+3. 终端运行即可
+```shell
+python3 coronavirus.py
+```

Chapter3 - Server/chapter3.md

@@ -11,3 +11,4 @@
 * [6、YAML](https://github.com/FantasticLBP/knowledge-kit/blob/master/Chapter3%20-%20Server/3.6.md)
 * [7、Node单元测试](https://github.com/FantasticLBP/knowledge-kit/blob/master/Chapter3%20-%20Server/3.7.md)
 * [8、数据安全（反爬虫）之「防重放」策略](https://github.com/FantasticLBP/knowledge-kit/blob/master/Chapter3%20-%20Server/3.8.md)
+* [9、爬取疫情数据并用 Markdown 预览](https://github.com/FantasticLBP/knowledge-kit/blob/master/Chapter3%20-%20Server/3.9.md)