Python爬取公交线路信息及站点shp数据 文末附数据下载地址
创始人
2024-01-31 04:23:03
0次
本篇主要记录爬取公交网整个过程，由于这次所用方法虽比较常规，但由于该网站页面内容转码原因以及遍历链接较多，所以小坑还是比较多的，特在此进行记录。
以前爬过百度地图，当时用的是API平台，加上网站比较规范，所以标签节点什么的都比较清晰，但这次由于特殊原因所选择的网站为公交网，废话不多说直接开始吧。
网站主页：www.xbus.cn
操作环境为
-
window 8
-
python 3.6
-
Jupyter Notebook
-
re requests lxml pandas time os urllib
调用的库（这次不用截图了，用代码块更清楚一些）：
1import requests2import csv3import time 4import pandas as pd5import re6from lxml import etree7import urllib8import os9from IPython.core.interactiveshell import InteractiveShell
10InteractiveShell.ast_node_interactivity = 'all'
一、首先打开主页，进入公交线路信息页面，爬取第一页内容
打开F12，检
相关内容
热门资讯
喜欢穿一身黑的男生性格（喜欢穿...
今天百科达人给各位分享喜欢穿一身黑的男生性格的知识，其中也会对喜欢穿一身黑衣服的男人人好相处吗进行解...
发春是什么意思（思春和发春是什...
本篇文章极速百科给大家谈谈发春是什么意思，以及思春和发春是什么意思对应的知识点，希望对各位有所帮助，...
网络用语zl是什么意思（zl是...
今天给各位分享网络用语zl是什么意思的知识，其中也会对zl是啥意思是什么网络用语进行解释，如果能碰巧...
为什么酷狗音乐自己唱的歌不能下...
本篇文章极速百科小编给大家谈谈为什么酷狗音乐自己唱的歌不能下载到本地?，以及为什么酷狗下载的歌曲不是...
华为下载未安装的文件去哪找（华...
今天百科达人给各位分享华为下载未安装的文件去哪找的知识，其中也会对华为下载未安装的文件去哪找到进行解...
怎么往应用助手里添加应用（应用...
今天百科达人给各位分享怎么往应用助手里添加应用的知识，其中也会对应用助手怎么添加微信进行解释，如果能...
家里可以做假山养金鱼吗（假山能...
今天百科达人给各位分享家里可以做假山养金鱼吗的知识，其中也会对假山能放鱼缸里吗进行解释，如果能碰巧解...
四分五裂是什么生肖什么动物（四...
本篇文章极速百科小编给大家谈谈四分五裂是什么生肖什么动物，以及四分五裂打一生肖是什么对应的知识点，希...
一帆风顺二龙腾飞三阳开泰祝福语...
本篇文章极速百科给大家谈谈一帆风顺二龙腾飞三阳开泰祝福语，以及一帆风顺二龙腾飞三阳开泰祝福语结婚对应...
美团联名卡审核成功待激活（美团...
今天百科达人给各位分享美团联名卡审核成功待激活的知识，其中也会对美团联名卡审核未通过进行解释，如果能...