![Python 3 爬虫、数据清洗与可视化实战(第2版)](https://wfqqreader-1252317822.image.myqcloud.com/cover/935/32517935/b_32517935.jpg)
3.3 存储数据到MongoDB
MongoDB是一个基于分布式文件存储的数据库,由C++语言编写,旨在为Web应用提供可扩展的高性能数据存储解决方案。
MongoDB是一款介于关系数据库和非关系数据库之间的产品,它在非关系数据库中功能最丰富,最像关系数据库。
3.3.1 下载并安装MongoDB
1.下载MongoDB
到MongoDB的官网下载MongoDB即可。
2.配置本地MongoDB
MongoDB每次启动时都需要在CMD中进行配置,找到安装目录下的bin文件夹路径,如图3-11所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_20.jpg?sign=1738852097-RuFqT6tA7iXefoiMEa81khXScFXM6rHx-0-7b0d253011e21ce8ff3dc5b82b4d54fb)
图3-11
由CMD进入以下路径:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_21.jpg?sign=1738852097-Mfzf6y1CbbiHiZxx2M4JfbEj29ZxvK78-0-a388c403d1271e9e6a00d04c78c62b37)
配置数据库路径,配置前要先在C盘中新建文件夹,代码如下。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_22.jpg?sign=1738852097-ZFa8gFy5Jh188WoQfXJEbNJOGv5z58jz-0-bf48a04a09c9fd6114c93447497a2099)
代码运行结果如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_23.jpg?sign=1738852097-MIW85qRF6zZmtCx4C8NOqqXBzXGW2F1v-0-853da3dfef215674e65073315366de9d)
再打开一个CMD,进入MongoDB确认数据库已经启动,进入bin路径,如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_24.jpg?sign=1738852097-eSsNC2URJgoUjiXNg9U6YCJveGZRUis6-0-4f0089eba720a0764acbfa81f2769aca)
输入“mongo”连接数据库,显示“>”就代表MongoDB已经正常启动,如下所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_25.jpg?sign=1738852097-mMeUCQTqVi9Q2rEjqUMSixmv6GQtBvES-0-e857882e2c1aefd6bfa89ac442045d07)
3.3.2 在PyCharm中安装Mongo Plugin
在PyCharm中,依次执行“File”g“Settings”g“Plugins”→“Browse Repositories”命令,输入“mongo”,然后选择“Mongo Plugin”,如图3-12和图3-13所示。
安装好后重新启动PyCharm,就可以在右侧看到Mongo Explorer。
如果没有这个窗口,则可以将鼠标光标停留在左下角的图标上,然后在自动弹出的菜单中选择“Mongo Explorer”命令,如图3-14所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_26.jpg?sign=1738852097-5W26zcQg2D03qHING40AdedsbVRsCQ6Y-0-674a235e95906f7ed20bc7629d927d6b)
图3-12
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_27.jpg?sign=1738852097-qkSEU9P2wvIMIy3j1JcxzynKEBBZSNe9-0-c2733f394ff231b9283319b1baab3f64)
图3-13
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_28.jpg?sign=1738852097-39bNSvwJtZJizdY0iJsPTgtoKg7e7oAD-0-46ce3540035eb395380427de9d2a405e)
图3-14
接下来在Mongo Explorer窗口中单击设置按钮,创建连接(通过PyCharm File菜单中的Settings也可以设置),如图3-15所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_29.jpg?sign=1738852097-L0srZ5tlfGxD19NB61aQ2PnY9gGT9K0a-0-e8a2301b07479093d51e1f988c9364c9)
图3-15
在Mongo Servers设置窗口中单击左侧的加号按钮(addServer),如图3-16所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_30.jpg?sign=1738852097-bF4Xy2OTTVuZWjT6MSho1H8Tgqwfd9lP-0-8353093b5463a37bda91dcfd1d958b51)
图3-16
输入连接名,单击“Test Connection”(测试连接)按钮,当提示信息为“Connection test successful”时表示连接正常,然后单击“OK”按钮保存设置即可,如图3-17所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_31.jpg?sign=1738852097-W71ve3P4PZZyQCng7xfRBYLXt7EADvx4-0-8865940e3d28c41fb00036baab16bfc6)
图3-17
3.3.3 将数据存入MongoDB中
下面尝试将获取的数据存入MongoDB中,首先输入以下代码。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_32.jpg?sign=1738852097-cPg0ww3GuSLpcDZ0kuixZhkc14IlAUHe-0-2223b5fb634d90f80af84601e2291624)
运行后双击连接,可以看到名为weather的数据库,如图3-18所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_33.jpg?sign=1738852097-uENzjXjFg3o0e10ZiuJCLGf6ErBxXkdt-0-a0154f5b52c8b033d5fb5171024b456a)
图3-18
展开weather数据库,双击sheet_weather_3这张表(见图3-19(b)),会弹出预览窗口(见图3-19(a)),可以从该窗口中观察获取到的天气预报数据,数据以JSON格式存储在数据库中。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_34.jpg?sign=1738852097-VkPmR3gG6upTiMf4RxL2YkbXaVaPkw3A-0-eead3ce33357997b1cd3512a0aba8c67)
图3-19
可以直接在预览窗口中展开JSON的树形结构,如图3-20所示。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_35.jpg?sign=1738852097-hbJfBXXIjZVVihg0mqxOTDxnIWRVbiMp-0-276c14556729e8f6754b91f7261386c4)
图3-20
需要提前安装PyMongo库,这是一个提供Python和MongoDB连接的库,使用方法如下。
1.建立连接
输入以下代码,其中localhost是主机名,27017是端口号(在默认情况下是这个参数)。
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_36.jpg?sign=1738852097-jxPNcjZSUWmqi8rpnesxZhJtcJfCNULM-0-8830e7738cb85d2ab0d224e93188597b)
2.新建名为weather的数据库
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_37.jpg?sign=1738852097-illrdPLZjj9PfMYzhMe9qwlgxGXlqdCG-0-f04c3d270758b4ff9d6a7a11a8d24442)
3.新建名为sheet_weather_3的表
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_38.jpg?sign=1738852097-qRG3NIlcxGsUcIOqLlcX8BvRxA2hObFA-0-0385888fae4da7e93795abb53fc4691c)
4.写入数据
输入以下代码:
![img](https://epubservercos.yuewen.com/3DAE1E/17545851106441906/epubprivate/OEBPS/Images/txt003_39.jpg?sign=1738852097-MXXT3Pn5K3DFWeBeKnO8pSYUjjAD2oo5-0-1dbcf6940519818adfc0518b4ac58846)