100字范文,内容丰富有趣,生活中的好帮手!
100字范文 > Python爬取链家地产二手房信息

Python爬取链家地产二手房信息

时间:2024-07-29 11:35:13

相关推荐

Python爬取链家地产二手房信息

“”"

1.爬取链家地产二手房信息

要求:使用代理进行爬取:59.58.151.34:3879

步骤:1.找URL第一页:/ershoufang/pg1/第二页:/ershoufang/pg2/第三页:/ershoufang/pg3/注意:链家有两种地址:第一种:城市名称是拼音缩写: 北京 ---- > bj第二种: 城市名称是拼音: 宜昌 --- > yichang2.提取需要的内容:1.地址 2.总价格正则表达式:re.findall(<a href="javascript:;">(.*?) </a>.*<div><span>(.*?)</span>,html,re.S)3.写入本地注意:需要什么内容,直接将前后完整的字符串复制进去,然后将需要的内容使用: (.*?)代替

“”"

import requests

import re

class LianjiaSpyder:

def __init__(self):self.headers = {&#

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。