社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  Python

为大家谋福li,利用Python把某网站的所有那啥妹子都爬了下来!

python • 6 年前 • 266 次点击  

这个网站名字叫女神网,里面的女神都非常漂亮性感,所以今天用这个网站来做示例。




女神福利!加小编QQ群:696541369可以获取各类python学习资料,女神准备的哦!


ok,我们直接上大家最需要的:

系统环境的话,Windows都可以

装个Python和pycharm就好了,如果没有软件的话可以私信小编要,还有基础学习视频等等~软件安装好之后,win+r在弹出的运行窗口输入cmd按回车进入cmd管理界面,输入:

pip install (加上下面这些库,来一个个安装)

requests、re、os、pymongo、Beatifulsoup、time

例如:pip install requests

安装完后就可以开始了!

来看代码:




最重要的是分析网站:




获得图片链接后,只需要保存访问图片链接的response.content,即可实现图片下载保存。通过os库进行文件夹创建,分类保存。再设置格式,保存至MONGODB数据库




大家赶紧去尝试一下吧!



Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/29630
 
266 次点击