网上那么多的穷游攻略该看那个?当然是全都要了,Python帮你爬取
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 作者:IT共享者 喜欢的朋友欢迎关注小编,除了分享技术文章之外还有很多福利 加企鹅群695185429即可免费获取,资料全在群文件里。资料可以领取包括不限于Python实战演练、PDF电子文档、面试集锦、学习资料等 项目背景 穷游网提供原创实用的出境游旅行指南、攻略,旅行社区和问答交流平台,以及智能的旅行规划解决方案,同时提供签证、保险、机票、酒店预订、租车等在线增值服务。穷游“鼓励和帮助中国旅行者以自己的视角和方式体验世界”。 今天教大家获取穷游网的城市信息,使用Python将数据写入csv文档。 项目目标 实现将获取对应的城市、图片链接、热点、批量下载 保存csv文档。 涉及的库和网站 1、网址如下: https://place.qyer.com/south-korea/citylist-0-0-{} 2、涉及的库:requests、lxml、fake_useragent、time、csv 项目分析 首先需要解决如何对下一页的网址进行请求的问题。可以点击下一页的按钮,观察到网站的变化分别如下所示: - https://place.qyer.com/south-korea/citylist-0-0-1 - https://place.qyer.com