Bootstrap

Python爬虫工具

目录

1. BeautifulSoup

1.1 特点

1.2 使用步骤

1.3 解析器

1.4 教程

1.5 Project:安居客房价抓取(BeautifulSoup)

如何获取Header信息

2. Selenium

2.1 Project:安居客房价抓取(Selenium)

2.2 Project:自动登录开课吧学习中心(Selenium)

常见的python爬虫工具如下:

  1. BeautifulSoup:Python Html 解析库,BeautifulSoup 将复杂 HTML 文档转换成一个复杂的树形结构,每个节点都是 Python 对象。
  2. Selenium:Web应用的自动测试工具,可以直接运行在浏览器中,原理是模拟用户在进行操作,支持当前多种主流的浏览器
  3. Scrapy:Python爬虫框架,把基础爬虫功能抽象出来做成的脚手架,Selenium可以应用在Scrapy爬虫框架中
  4. Puppeteer:可以控制Headless Chrome,即无界面的自动化测试框架,支持模拟键盘输入、截图、表单提交等特殊场景操作,Google2018年推出的爬虫神器

1. BeautifulSoup

官方文档:https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/

1.1 特点

简单易用,相比之下如果使用正则和 xPath 则需要记住特定语法

1.2 使用步骤

Step1:获取待分析HTML页面(两种方式)

Step2:通过文本初始化 bs 对象

Step3:通过 find/find_all 查找信息
可以迭代式的查找,比如先定位出一段内容,再其上继续检索

1.3 解析器

  • html.parse:python 自带,容错性不高,对于不太规范的网页会丢失部分内容
  • lxml:解析速度快,需额外安装
  • xml:同属 lxml 库,支持 XML 文档
  • html5lib:最好的容错性,但速度稍慢

1.4 教程

# 使用BeautifulSoup分析HTML页面内容
from bs4 import BeautifulSoup

# 步骤1:获取待分析HTML页面
# 方式1:直接将HTML复制下来
# 方式2:使用requests工具包请求URL获取HTML页面内容
html_doc = """
<html>
<head>
    <title>BeautifulSoup Demo</title>
</head>
<body>
<p class="title aq">
    <b>
        Here is the content
    </b>
</p>
<p class="story">Python爬虫有很多优秀的工具
    <a href="https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/" class="tools" id="link1">BeautifulSoup</a>,
    <a href="http://www.selenium.org.cn/" class="sisttoolser" id="link2">Selenium</a> 
    and
    <a href="https://scrapy.org/" class="tools" id="link3">Scrapy</a>
    他们都可以帮你爬虫想要的页面内容
</p>
<p class="story">...</p>
"""
 
# 步骤2:通过文本创建bs对象
soup = BeautifulSoup(html_doc, 'html.parser', from_encoding='utf-8')

# 步骤3:通过bs对象对属性进行增、删、改、查等操作
print(soup.prettify())          # 按照标准的缩进格式的结构输出
print("-"*100)

print(soup.title)               # 输出第一个 title 标签
print(soup.title.name)          # 输出第一个 title 标签的标签名称
print(soup.title.string)        # 输出第一个 title 标签的包含内容
print(soup.title.parent.name)   # 输出第一个 title 标签的父标签的标签名称
print("-"*100)
 
print(soup.p)                   # 输出第一个 p 标签
print(soup.p['class'])          # 输出第一个 p 标签的 class 属性内容
print("-"*100)

print (soup.a)
print (soup.find_all('a'))
print (soup.find(id="link3"))
print("-"*100)
 
print(soup.a['href'])           # 输出第一个 a 标签的 href 属性内容
# soup的属性操作方法与字典一样,可以被添加,删除或修改. 
soup.a['href'] = 'http://www.baidu.com/'  # 修改第一个 a 标签的href属性为 http://www.baidu.com/
soup.a['name'] = u'百度'                  # 给第一个 a 标签添加 name 属性
print(soup.a)

del soup.a['class']                      # 删除第一个 a 标签的 class 属性为
print(soup.a)
运行结果:
<html>
 <head>
  <title>
   BeautifulSoup Demo
  </title>
 </head>
 <body>
  <p class="title aq">
   <b>
    Here is the content
   </b>
  </p>
  <p class="story">
   Python爬虫有很多优秀的工具
   <a class="tools" href="https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/" id="link1">
    BeautifulSoup
   </a>
   ,
   <a class="sisttoolser" href="http://www.selenium.org.cn/" id="link2">
    Selenium
   </a>
   and
   <a class="tools" href="https://scrapy.org/" id="link3">
    Scrapy
   </a>
   他们都可以帮你爬虫想要的页面内容
  </p>
  <p class="story">
   ...
  </p>
 </body>
</html>
----------------------------------------------------------------------------------------------------
<title>BeautifulSoup Demo</title>
title
BeautifulSoup Demo
head
----------------------------------------------------------------------------------------------------
<p class="title aq">
<b>
        Here is the content
    </b>
</p>
['title', 'aq']
----------------------------------------------------------------------------------------------------
<a class="tools" href="https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/" id="link1">BeautifulSoup</a>
[<a class="tools" href="https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/" id="link1">BeautifulSoup</a>, <a class="sisttoolser" href="http://www.selenium.org.cn/" id="link2">Selenium</a>, <a class="tools" href="https://scrapy.org/" id="link3">Scrapy</a>]
<a class="tools" href="https://scrapy.org/" id="link3">Scrapy</a>
----------------------------------------------------------------------------------------------------
https://beautifulsoup.readthedocs.io/zh_CN/v4.4.0/
<a class="tools" href="http://www.baidu.com/" id="link1" name="百度">BeautifulSoup</a>
<a href="http://www.baidu.com/" id="link1" name="百度">BeautifulSoup</a>

1.5 Project:安居客房价抓取(BeautifulSoup)

在抓取网页信息之前,我们要确定好下面三个事情,方可进行代码编写:

  • Step1:确定URL
    https://beijing.anjuke.com/sale/p1
  • Step2:确定要提取的元素
    标题name,详细信息 details,地址 address,标签 tags,经纪人broker ,总价 price,每平米价格 unit
  • Step3:基于要提取的元素,定位html的标签

# 使用request + BeautifulSoup提取安居客北京二手房信息
import requests
from bs4 import BeautifulSoup

# 步骤1:获取待分析HTML页面
# 方式1:直接将HTML复制下来
# 方式2:使用requests工具包请求URL获取HTML页面内容
url = 'https://beijing.anjuke.com/sale/p1'
headers = {'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36'}
html = requests.get(url,headers=headers,timeout=10)
content = html.text
#print(content)

# 步骤2:通过文本创建bs对象
soup = BeautifulSoup(content, 'html.parser', from_encoding='utf-8')

# 步骤3:通过bs对象对属性进行增、删、改、查等操作
print(soup.title)               # 输出第一个 title 标签
print(soup.title.name)          # 输出第一个 title 标签的标签名称
print(soup.title.string)        # 输出第一个 title 标签的包含内容
print(soup.title.parent.name)   # 输出第一个 title 标签的父标签的标签名称
print("-"*100)


# 找到class="list-item"下面的所有li标签
house_list = soup.find_all('li',class_="list-item")
# 提取房源信息
for house in house_list:
    # 提取房源信息
    name = house.find('div',class_="house-title").a.text.strip()
    details = house.find('div',class_='details-item').text.strip()
    address = house.find('span',class_="comm-address").text.strip()
    tags = house.find('div',class_='tags-bottom').text.strip()
    broker = house.find('div',class_="broker-item").text.strip()
    price = house.find('span',class_="price-det").text.strip()
    unit_price = house.find('span',class_="unit-price").text.strip()
    print(name, details, address, tags, broker, price, unit_price)

运行结果:

<title>北京二手房房产网,北京二手房交易信息,北京二手房出售 - 58安居客</title>
title
北京二手房房产网,北京二手房交易信息,北京二手房出售 - 58安居客
meta
----------------------------------------------------------------------------------------------------
加州水郡南北通透业主自住随时看房 1室1厅|68m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  向俊荣 225万 32929元/m²
加州水郡 二次装修一居室 满五年 着急出售 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟近地铁繁华地段 郑舒键 165万 37263元/m²
(刚需比看房)南向1室 装修干净 自住 满五年 随时签 1室1厅|53m²|低层(共14层)|2008年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区环境优美安全性高 杜明旭 203万 37698元/m²
加州水郡正规西北一居室,采光好全明格局 1室1厅|58m²|低层(共14层)|2011年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  陈丽丽 215万 36546元/m²
新上!满五南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  田冰浩 205万 34948元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟交通便利 孙哲 206万 38255元/m²
加州水郡西区 南北通透一居室出售 看房方便 1室1厅|68m²|低层(共15层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 近地铁配套成熟环境优美 杨亚玲 243万 35279元/m²
加州水郡西区(南区)~1室1厅~63.89平米 1室1厅|63m²|低层(共15层)|2014年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  殷飞翔 199万 31148元/m²
新上!满五  南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  胡婵娟 205万 34948元/m²
长阳加州水郡西北一居室,出售 1室1厅|58m²|低层(共14层)|2011年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 近地铁配套成熟环境优美 杨亚玲 215万 36546元/m²
长阳加州水郡三期南向一居室出售 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 近地铁配套成熟环境优美 杨亚玲 206万 38255元/m²
加州水郡一居室,二次精装 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟交通便利 孙哲 165万 37263元/m²
长阳加州水郡(西区)南向1居,大客厅,带电梯 看房方便 1室1厅|63m²|低层(共15层)|2014年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  陈向阳 199万 31148元/m²
长阳(必看好房)加州首付65万办齐 婚房装修,业主诚意出售 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区交通便利位置安静 赵鑫 206万 38255元/m²
加州水郡西区(北区)~1室1厅~53.85平米 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  谢玉明 203万 37698元/m²
加州水郡一居室165,自住装修,诚心出售! 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  杨雪 165万 37263元/m²
新上!南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟交通便利 孙哲 205万 34948元/m²
加州水郡西区(南区)正规1室1厅63.89平米199万 1室1厅|63m²|低层(共15层)|2014年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  刘俊杰 199万 31148元/m²
加州水郡正规西北一居室,采光好全明格局 1室1厅|58m²|低层(共14层)|2011年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  杨艳红 215万 36546元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  胡婵娟 206万 38255元/m²
(双12必看)老业主婚房家用电器全  价格180万了 1室1厅|63m²|低层(共15层)|2014年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 近地铁配套成熟环境优美 魏子文 199万 31148元/m²
精装修 加州水郡西区 53平 1室1厅 满五  住房 居家自 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  陈若全 203万 37698元/m²
长阳加州水郡新出一居室 视野好采光好 看房便利 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 交通便利配套成熟环境优美 王宝山 205万 34948元/m²
加州水郡免装修一居室 朝南 满五一套门口位置随时看 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 全南户型景观房近入口 王金贵 206万 38255元/m²
加州水郡一居室,二次精装,配套齐全,随时看房,交通方便 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  宫禹同 165万 37263元/m²
小户型,一居室,看房方便,诚意出售 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  田冰浩 165万 37263元/m²
加州水郡三期,南向一居室,已收钥匙,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 环境优美配套成熟交通便利 王绍环 205万 34948元/m²
加州水郡西区(北区)~1室1厅~53.85平米 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  殷飞翔 203万 37698元/m²
新上!长阳加州水郡南向一居室 二次装修 拎包入住 随时看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  谢琨 206万 38255元/m²
惊爆价 惊爆价 刚需比选正规1室朝南 满五 业主急售 急售 1室1厅|63m²|低层(共15层)|2014年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区环境优美交通便利 杜明旭 199万 31148元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  闫召月 206万 38255元/m²
满五  住房 朝南 53平 精装修 楼层好 视野无遮挡 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 繁华地段近地铁素质住户 高强 203万 37698元/m²
新上!满五  南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  谢琨 205万 34948元/m²
加州水郡  一居室,二次精装 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  程园园 165万 37263元/m²
长阳加州水郡西区南向一居室 采光好大窗户 户型方正看房方便 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 繁华地段交通便利全南户型 孟路路 203万 37698元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  安婷 206万 38255元/m²
长阳加州水郡南向1居室出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 近地铁配套成熟环境优美 杨亚玲 205万 34948元/m²
长阳加州水郡新出一居室 视野好采光好 看房便利 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 交通便利配套成熟环境优美 王宝山 165万 37263元/m²
新上!满五仅契税南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟环境优美位置安静 侯丽霞 205万 34948元/m²
新上加州水郡南向一居室,整体二装,好楼层,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  杨雪 206万 38255元/m²
朝南 1室1厅 206万 满五  住房 看房方便 有钥匙 1室1厅|53m²|低层(共14层)|2013年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区安全性高客厅朝南 刘婷 203万 37698元/m²
加州水郡  一居室,二次精装 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  冯卓 165万 37263元/m²
新上!满五南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 全南户型厅带阳台近入口 王金贵 205万 34948元/m²
新上 加州水郡南向一居室 采光好二次精装修 有钥匙 诚心出售 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  王莹 206万 38255元/m²
加州水郡  一居室,二次精装 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  安婷 165万 37263元/m²
加州水郡  一居室,二次精装 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  胡婵娟 165万 37263元/m²
新上!加州水郡 南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 繁华地段交通便利配套成熟 史长影 205万 34948元/m²
长阳加州水郡新出一居室 视野好采光好 看房便利 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 交通便利配套成熟环境优美 王宝山 206万 38255元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  武凡凡 206万 38255元/m²
长阳加州水郡一居室,二次精装 低楼层 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区配套成熟环境优美 付田华 165万 37263元/m²
新上!南向一居室 采光好 配套成熟交通便利 产权清晰 诚心卖 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  王莹 205万 34948元/m²
甄选,加州水郡温馨一居室,二次精装,首付低,月供没压力 1室1厅|44m²|低层(共16层)|2009年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 品质小区环境优美配套成熟 郭海 165万 37263元/m²
新上!满五仅契税南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟主卧朝南厅带阳台 李金 205万 34948元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  郑舒键 206万 38255元/m²
新上!满五  南向一居室,精装修,看房方便,诚心出售 1室1厅|58m²|低层(共16层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  冯卓 205万 34948元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟环境优美位置安静 侯丽霞 206万 38255元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  陈晓涛 206万 38255元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  史长影 206万 38255元/m²
新上三期满五年一套房 南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号 配套成熟繁华地段全南户型 张磊 206万 38255元/m²
新上三期南向一居室,整体二装,有钥匙方便看房 1室1厅|53m²|低层(共14层)|2010年建造 加州水郡西区  
                    房山-长阳-昊天北大街48号  胡晓萌 206万 38255元/m²

如何获取Header信息

  • 打开你想查询的网站,按F12,或者鼠标右键一下选择检查。会弹出如下的审查元素页面;
  • 点击上方选项中的Network选项;
  • 此时按Ctrl+R --> 重载窗口;
  • 单击选择下方框中的第一个;
  • 选择Headers选项,其中就会有Request Headers --> user-agent,包括你需要的信息。

2. Selenium

配置

  • 步骤2:将下载的ChromeDriver放到……/Chrome/Application目录下

  • 步骤3:程序导入

导包 --> from selenium import webdriver
指定路径 --> 指定chrome_driver路径driver=webdriver.Chrome(executable_path=chrome_driver)

WebDriver实际上就是Selenium 2,是一种用于Web应用程序的自动测试工具,提供了一套方便操作的API

2.1 Project:安居客房价抓取(Selenium)

# -*- coding: utf-8 -*-
# 使用Selenium, 北京安居客->小区->二手房信息
import json
import requests
from lxml import etree
import time
from selenium import webdriver
import pandas as pd 

# 步骤1:通过webdriver创建一个Chrome浏览器的driver
chrome_driver = 'C:\Program Files (x86)\Google\Chrome\chromedriver.exe'
driver = webdriver.Chrome(executable_path = chrome_driver)

# 去空格,去换行\n
def format_str(str):
    return str.replace('\n', '').replace(' ', '')

# 步骤2:通过drive获取访问页面的完整HTML
# 对页面进行抓取分析
def work(request_url):
    # 步骤2.1:请求URL
    driver.get(request_url)
    time.sleep(1)
    # 步骤2.2:获取HTML页面内容
    html = driver.find_element_by_xpath("//*").get_attribute("outerHTML")  
    # 步骤2.3:使用etree进行HTML解析
    html = etree.HTML(html)  
    # 步骤2.4:设置需要抓取字段的xpath --> xml path 元素路径/元素定位
    # 注:这里需要安装Chrome浏览器插件Xpath Helper
    # 快捷键:Ctrl+Shift+S
    titles = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-info']//a/@title")
    links = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-info']//a/@href")
    addresses = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-info']/address/text()")
    prices = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-side']/p[1]/strong/text()")
    to_last_months = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-side']/p[2]/text()")
    completion_dates = html.xpath("/html/body/div[@class='w1180']/div[@class='maincontent']/div[@id='list-content']/div[@class='li-itemmod']/div[@class='li-info']/p[1]/text()[1]")
    houses = pd.DataFrame(columns = ['title', 'link', 'address', 'price', 'to_last_month', 'completion_date'])
    for i in range(len(titles)):
        # 设置抓取的房源
        temp = {}
        temp['title'] = format_str(titles[i])
        temp['link'] = format_str(links[i])
        temp['address'] = format_str(addresses[i])
        temp['price'] = format_str(prices[i])
        temp['to_last_month'] = format_str(to_last_months[i])
        temp['completion_date'] = format_str(completion_dates[i])
        # 添加房源
        houses = houses.append(temp,ignore_index=True)
    return houses

# 抓取10页北京房价数据
page_num = 10
base_url = 'https://beijing.anjuke.com/community/p'
# houses = pd.DataFrame(columns = ['title', 'link', 'address', 'price', 'to_last_month', 'completion_date'])
for i in range(page_num):
    request_url = base_url+str(i+1)
    print(request_url)
    # 抓取该页的房源信息
    temp = work(request_url)
    houses = houses.append(temp)
    print(temp)
houses.to_csv('house_prices_bj.csv')

运行结果:

https://beijing.anjuke.com/community/p1
        title                                               link  \
0        石桥东区    https://beijing.anjuke.com/community/view/76705   
1         碧桐园  https://beijing.anjuke.com/community/props/sal...   
2        湖光小区  https://beijing.anjuke.com/map/sale/#l1=40.384...   
3      龙山新新小镇   https://beijing.anjuke.com/community/round/76705   
4       裕华园一区  https://beijing.anjuke.com/community/trends/76705   
5      林肯公园C区  https://beijing.anjuke.com/community/photos2/b...   
6        万柳书院  https://beijing.anjuke.com/community/view/7670...   
7        日新家园   https://beijing.anjuke.com/community/view/124245   
8   潘家园小区(怀柔)  https://beijing.anjuke.com/community/props/sal...   
9        弘善家园  https://beijing.anjuke.com/map/sale/#l1=39.930...   
10       澳洲康都  https://beijing.anjuke.com/community/round/124245   
11       碧水庄园  https://beijing.anjuke.com/community/trends/12...   
12        东山墅  https://beijing.anjuke.com/community/photos2/b...   
13        霞公府  https://beijing.anjuke.com/community/view/1242...   
14      天恒别墅山    https://beijing.anjuke.com/community/view/80753   
15       紫玉山庄  https://beijing.anjuke.com/community/props/sal...   
16     龙湖颐和原著  https://beijing.anjuke.com/map/sale/#l1=40.333...   
17      首创禧瑞都   https://beijing.anjuke.com/community/round/80753   
18      青春路七院  https://beijing.anjuke.com/community/trends/80753   
19       阳光上东  https://beijing.anjuke.com/community/photos2/b...   
20      紫禁壹号院  https://beijing.anjuke.com/community/view/8075...   
21      格拉斯小镇   https://beijing.anjuke.com/community/view/168866   
22       美景东方  https://beijing.anjuke.com/community/props/sal...   
23       国锐金嵿  https://beijing.anjuke.com/map/sale/#l1=40.285...   
24    合生霄云路8号  https://beijing.anjuke.com/community/round/168866   
25       丽泽景园  https://beijing.anjuke.com/community/trends/16...   
26  富力又一城(C区)  https://beijing.anjuke.com/community/photos2/b...   
27       新贤家园  https://beijing.anjuke.com/community/view/1688...   
28       星岛假日   https://beijing.anjuke.com/community/view/943644   
29       百环家园  https://beijing.anjuke.com/community/props/sal...   

             address   price to_last_month completion_date  
0      [密云-密云周边]旧密古路   27070        ↑1.29%       竣工日期:2012  
1        [海淀-四季青]田村路   61089        ↓0.14%       竣工日期:2008  
2      [怀柔-怀柔城区]湖光北街   34219        ↓0.02%       竣工日期:2000  
3      [怀柔-怀柔城区]京承高速   27507        ↓0.55%       竣工日期:2007  
4       [怀柔-怀柔城区]龙芸路   24501        ↓1.71%       竣工日期:暂无数据  
5        [大兴-亦庄]西环北路   62206        ↑0.35%       竣工日期:2008  
6    [海淀-万柳]万柳华府北街9号  221866        ↓4.34%       竣工日期:2015  
7        [丰台-宋家庄]宋庄路   41175        ↑0.77%       竣工日期:1997  
8    [怀柔-怀柔城区]滨湖北街1号   33126        ↑1.99%       竣工日期:1980  
9    [朝阳-潘家园]华威南路42号   52929        ↑1.36%       竣工日期:2009  
10    [朝阳-望京]望京北路39号   86287        ↑0.03%       竣工日期:2004  
11        [昌平-沙河]定泗路  100684        ↑0.29%       竣工日期:1994  
12  [朝阳-朝阳公园]东四环北路7号  161837        ↑0.54%       竣工日期:2000  
13    [东城-王府井]霞公府街3号  148285        ↑4.13%       竣工日期:2010  
14     [怀柔-雁栖]红螺路39号   51391        ↑1.56%       竣工日期:2011  
15    [朝阳-亚运村]紫玉东路1号  182161        ↑8.71%       竣工日期:2003  
16       [海淀-西苑]二龙闸路  109133        ↑0.20%       竣工日期:2010  
17   [朝阳-CBD]朝阳路139号  127479        ↓2.30%       竣工日期:2015  
18      [怀柔-怀柔城区]青春路   34569        ↑0.16%       竣工日期:2000  
19   [朝阳-酒仙桥]东四环北路6号   88328        ↓0.73%       竣工日期:2004  
20      [大兴-亦庄]百意街1号   69226        ↓0.51%       竣工日期:2014  
21      [通州-通州周边]滨河路  103268       ↑11.87%       竣工日期:2015  
22   [朝阳-华威桥]松榆南路38号   70501        ↓1.57%       竣工日期:2003  
23     [大兴-亦庄]荣华南路1号   56621        ↓0.90%       竣工日期:2014  
24      [朝阳-燕莎]霄云路8号  139261        ↑5.13%       竣工日期:2013  
25       [丰台-丽泽桥]益泽路   69574        ↑0.94%       竣工日期:2012  
26    [朝阳-豆各庄]黄厂南里3号   56132        ↓0.28%       竣工日期:2010  
27     [怀柔-怀柔城区]滨湖南街   41014        ↑0.16%       竣工日期:2006  
28       [大兴-亦庄]北环西路   51637        ↑2.19%       竣工日期:2004  
29     [朝阳-双井]广渠路66号   58499        ↑1.12%       竣工日期:2005  
https://beijing.anjuke.com/community/p2
               title                                               link  \
0               金善名居   https://beijing.anjuke.com/community/view/169902   
1               公园大道  https://beijing.anjuke.com/community/props/sal...   
2            棕榈泉国际公寓  https://beijing.anjuke.com/map/sale/#l1=40.290...   
3              北京玫瑰园  https://beijing.anjuke.com/community/round/169902   
4             珠江绿洲家园  https://beijing.anjuke.com/community/trends/16...   
5               育龙铭居  https://beijing.anjuke.com/community/photos2/b...   
6               翡翠公园  https://beijing.anjuke.com/community/view/1699...   
7             望京西园三区    https://beijing.anjuke.com/community/view/51433   
8   北京壹号庄园(东方普罗旺斯四期)  https://beijing.anjuke.com/community/props/sal...   
9               财富公馆  https://beijing.anjuke.com/map/sale/#l1=39.932...   
10           朗园(星河湾)   https://beijing.anjuke.com/community/round/51433   
11           SOHO现代城  https://beijing.anjuke.com/community/trends/51433   
12             恒大未来城  https://beijing.anjuke.com/community/photos2/b...   
13        珠江罗马嘉园(西区)  https://beijing.anjuke.com/community/view/5143...   
14              理想家园    https://beijing.anjuke.com/community/view/51241   
15             常青园北里  https://beijing.anjuke.com/community/props/sal...   
16            泰禾北京院子  https://beijing.anjuke.com/map/sale/#l1=39.932...   
17              泛海世家   https://beijing.anjuke.com/community/round/51241   
18              滨河花园  https://beijing.anjuke.com/community/trends/51241   
19             首开缇香郡  https://beijing.anjuke.com/community/photos2/b...   
20               新龙城  https://beijing.anjuke.com/community/view/5124...   
21         广渠金茂府(东区)   https://beijing.anjuke.com/community/view/848297   
22              丽水嘉园  https://beijing.anjuke.com/community/props/sal...   
23              恒大华府  https://beijing.anjuke.com/map/sale/#l1=40.160...   
24              丽都壹号  https://beijing.anjuke.com/community/round/848297   
25            山水文园东园  https://beijing.anjuke.com/community/trends/84...   
26               华腾园  https://beijing.anjuke.com/community/photos2/b...   
27       山语间(保利西山林语)  https://beijing.anjuke.com/community/view/8482...   
28             长馨园小区    https://beijing.anjuke.com/community/view/51180   
29              新城国际  https://beijing.anjuke.com/community/props/sal...   

              address   price to_last_month completion_date  
0          [怀柔-庙城]富密路   27820        ↓0.03%       竣工日期:2007  
1     [朝阳-朝阳公园]公园南路6号   99454        ↑0.09%       竣工日期:2004  
2     [朝阳-朝阳公园]公园南路8号  104364        ↓0.50%       竣工日期:2004  
3        [昌平-沙河]高教园中街   69327        ↑1.14%       竣工日期:1995  
4      [朝阳-定福庄]建国路18号   49728        ↑0.50%       竣工日期:2003  
5       [怀柔-怀柔城区]乐园大街   24970        ↓0.03%       竣工日期:暂无数据  
6    [昌平-北七家]七星路,近北清路   58384        ↓0.24%       竣工日期:2016  
7          [朝阳-望京]望京街   64944        ↓0.05%       竣工日期:2003  
8      [昌平-北七家]定泗路88号   69622        ↓0.60%       竣工日期:2011  
9      [朝阳-来广营]康营中街9号   68352        ↑1.69%       竣工日期:2012  
10  [朝阳-朝青板块]四季星河中街1号   89532        ↓0.02%       竣工日期:2008  
11     [朝阳-CBD]建国路88号   63639        ↑1.28%       竣工日期:1999  
12      [大兴-大兴周边]新源大街   32136        ↑1.61%       竣工日期:2016  
13  [朝阳-朝青板块]朝阳北路107号   71724        ↓0.07%       竣工日期:2004  
14      [大兴-西红门]宏福路1号   34583        ↑7.09%       竣工日期:2015  
15   [海淀-四季青]昆明湖南路11号   51217        ↓1.70%       竣工日期:2015  
16      [朝阳-孙河]顺黄路47号   95208        ↑3.45%       竣工日期:2015  
17    [朝阳-朝阳公园]华章东路1号  156250        ↑0.36%       竣工日期:2017  
18    [朝阳-酒仙桥]东四环北路6号   92574        ↓6.83%       竣工日期:1999  
19        [通州-台湖镇]通房路   28492        ↓0.32%       竣工日期:2016  
20    [昌平-回龙观]昌平路380号   54638        ↑0.43%       竣工日期:2000  
21      [朝阳-双井]广渠路23号  126230        ↑2.19%       竣工日期:2014  
22    [朝阳-朝阳公园]朝阳公园南路   85257        ↓3.04%       竣工日期:1997  
23        [朝阳-东坝]东坝中街  103809        ↑1.10%       竣工日期:2017  
24       [朝阳-酒仙桥]驼房营路   84676        ↑0.38%       竣工日期:2011  
25        [朝阳-华威桥]弘燕路   92347        ↑0.43%       竣工日期:2018  
26    [朝阳-劲松]东三环南路54号   71040        ↓0.89%       竣工日期:1999  
27       [海淀-西北旺]黑龙潭路   63793        ↑0.30%       竣工日期:2010  
28      [丰台-长辛店]安康路2号   32380        ↑1.83%       竣工日期:暂无数据  
29  [朝阳-朝外大街]朝阳门外大街6号  122043        ↑0.53%       竣工日期:2002  
https://beijing.anjuke.com/community/p3
          title                                               link  \
0          远洋天地    https://beijing.anjuke.com/community/view/55087   
1         朱雀门小区  https://beijing.anjuke.com/community/props/sal...   
2          丽宫别墅  https://beijing.anjuke.com/map/sale/#l1=39.913...   
3      北京华侨城2号院   https://beijing.anjuke.com/community/round/55087   
4        华业东方玫瑰  https://beijing.anjuke.com/community/trends/55087   
5        荣丰2008  https://beijing.anjuke.com/community/photos2/b...   
6        山水文园中园  https://beijing.anjuke.com/community/view/5508...   
7          润泽御府    https://beijing.anjuke.com/community/view/53223   
8        万象新天家园  https://beijing.anjuke.com/community/props/sal...   
9          永利国际  https://beijing.anjuke.com/map/sale/#l1=39.876...   
10      远洋LAVIE   https://beijing.anjuke.com/community/round/53223   
11         馨瑞嘉园  https://beijing.anjuke.com/community/trends/53223   
12         观承别墅  https://beijing.anjuke.com/community/photos2/b...   
13     顶秀美泉小镇B区  https://beijing.anjuke.com/community/view/5322...   
14    世嘉光织谷(西区)   https://beijing.anjuke.com/community/view/167810   
15         王府花园  https://beijing.anjuke.com/community/props/sal...   
16     温泉花园(B区)  https://beijing.anjuke.com/map/sale/#l1=40.051...   
17         首城国际  https://beijing.anjuke.com/community/round/167810   
18          大成郡  https://beijing.anjuke.com/community/trends/16...   
19       南庭新苑北区  https://beijing.anjuke.com/community/photos2/b...   
20       远洋万和公馆  https://beijing.anjuke.com/community/view/1678...   
21          琨御府   https://beijing.anjuke.com/community/view/848602   
22        青春路六院  https://beijing.anjuke.com/community/props/sal...   
23         松榆东里  https://beijing.anjuke.com/map/sale/#l1=39.866...   
24  永丰嘉园(百旺杏林湾)  https://beijing.anjuke.com/community/round/848602   
25         丽都水岸  https://beijing.anjuke.com/community/trends/84...   
26        西山美墅馆  https://beijing.anjuke.com/community/photos2/b...   
27       钓鱼台7号院  https://beijing.anjuke.com/community/view/8486...   
28   金地格林小镇(大兴)   https://beijing.anjuke.com/community/view/215414   
29        力宝诗礼庭  https://beijing.anjuke.com/community/props/sal...   

                address   price to_last_month completion_date  
0        [朝阳-四惠]八里庄西里1号   70652        ↑0.20%       竣工日期:2000  
1         [西城-陶然亭]太平街8号  147606        ↑0.42%       竣工日期:2008  
2            [顺义-天竺]林荫路   79076        ↑2.60%       竣工日期:2007  
3       [朝阳-欢乐谷]金蝉欢乐园2号   69146        ↓0.76%       竣工日期:2006  
4     [通州-梨园]梨园南街,近临河里路   51815        ↓0.65%       竣工日期:2006  
5   [西城-广安门外]广安门外大街305号  142551        ↑2.61%       竣工日期:2003  
6           [朝阳-华威桥]弘燕路   87109        ↑0.27%       竣工日期:2005  
7            [朝阳-北苑]清苑路  104730        ↓1.50%       竣工日期:2014  
8        [朝阳-常营]常营北路10号   58959        ↓0.31%       竣工日期:2003  
9      [朝阳-三里屯]工人体育场体北路   71961        ↓0.19%       竣工日期:2010  
10   [朝阳-大山子]康营东路,近机场高速  118734        ↑4.09%       竣工日期:2008  
11           [海淀-上庄]沙阳路   42980        ↑2.21%       竣工日期:2010  
12        [顺义-中央别墅区]高白路   71769       ↑15.19%       竣工日期:2015  
13           [怀柔-雁栖]京加线   38477        ↓0.78%       竣工日期:2009  
14      [怀柔-雁栖]乐园西大街15号   31723        ↑1.10%       竣工日期:2012  
15       [昌平-北七家]王府街10号   51030        ↓1.75%       竣工日期:1995  
16          [昌平-北七家]立汤路   32810        ↑0.11%       竣工日期:1995  
17        [朝阳-双井]广渠路36号   93006        ↑0.31%       竣工日期:2010  
18          [丰台-岳各庄]大成路   85857        ↓0.40%       竣工日期:2009  
19      [丰台-新宫]槐房西路316号   53591        ↑1.79%       竣工日期:2009  
20         [朝阳-望京]阜通东大街  120689        ↓0.60%       竣工日期:2012  
21        [海淀-四季青]蓝靛厂南路  137831        ↑0.43%       竣工日期:2016  
22         [怀柔-怀柔城区]青春路   33617        ↓0.45%       竣工日期:2000  
23         [朝阳-潘家园]西大望路   62068        ↓0.24%       竣工日期:1992  
24          [海淀-西北旺]北清路   76950        ↑5.82%       竣工日期:2009  
25      [朝阳-酒仙桥]芳园南里10号   87380        ↓0.82%       竣工日期:2005  
26      [海淀-西山]南旱河路301号  101284        ↑2.43%       竣工日期:2004  
27       [海淀-公主坟]阜成路南二街  171035        ↓3.39%       竣工日期:2011  
28        [大兴-亦庄]天宝中街2号   57268        ↑0.44%       竣工日期:2003  
29        [大兴-亦庄]荣华中路8号   28672        ↓1.17%       竣工日期:2013  
https://beijing.anjuke.com/community/p4
        title                                               link  \
0    北京华侨城1号院   https://beijing.anjuke.com/community/view/847855   
1       丰台金茂府  https://beijing.anjuke.com/community/props/sal...   
2      温泉凯盛家园  https://beijing.anjuke.com/map/sale/#l1=39.868...   
3    流星花园(三区)  https://beijing.anjuke.com/community/round/847855   
4          瞰都  https://beijing.anjuke.com/community/trends/84...   
5     万国城MOMA  https://beijing.anjuke.com/community/photos2/b...   
6      府学胡同小区  https://beijing.anjuke.com/community/view/8478...   
7   沿海赛洛城(南区)   https://beijing.anjuke.com/community/view/915015   
8     石榴园北里小区  https://beijing.anjuke.com/community/props/sal...   
9     芍药居北里小区  https://beijing.anjuke.com/map/sale/#l1=39.841...   
10     国兴观湖国际  https://beijing.anjuke.com/community/round/915015   
11      丰汇园小区  https://beijing.anjuke.com/community/trends/91...   
12      青年汇佳园  https://beijing.anjuke.com/community/photos2/b...   
13  广渠金茂府(北区)  https://beijing.anjuke.com/community/view/9150...   
14   远洋山水(北区)   https://beijing.anjuke.com/community/view/610039   
15  沿海赛洛城(北区)  https://beijing.anjuke.com/community/props/sal...   
16       圣世一品  https://beijing.anjuke.com/map/sale/#l1=40.049...   
17    北京城建海梓府  https://beijing.anjuke.com/community/round/610039   
18       富乐二区  https://beijing.anjuke.com/community/trends/61...   
19        富力山  https://beijing.anjuke.com/community/photos2/b...   
20   世纪家园(密云)  https://beijing.anjuke.com/community/view/6100...   
21       龙湾别墅   https://beijing.anjuke.com/community/view/908903   
22       八仙别墅  https://beijing.anjuke.com/community/props/sal...   
23       尚峰尚水  https://beijing.anjuke.com/map/sale/#l1=40.091...   
24      温哥华森林  https://beijing.anjuke.com/community/round/908903   
25      青春路九院  https://beijing.anjuke.com/community/trends/90...   
26        银河湾  https://beijing.anjuke.com/community/photos2/b...   
27       千鹤家园  https://beijing.anjuke.com/community/view/9089...   
28      后横街小区    https://beijing.anjuke.com/community/view/57695   
29    国瑞城(中区)  https://beijing.anjuke.com/community/props/sal...   

               address   price to_last_month completion_date  
0       [朝阳-欢乐谷]金蝉北路1号   70158        ↓0.81%       竣工日期:2006  
1          [丰台-宋家庄]宋庄路   93133        ↓1.19%       竣工日期:2013  
2           [海淀-温泉]温泉路   49594        ↑1.33%       竣工日期:2014  
3       [昌平-回龙观]文化路23号   59128        ↑3.48%       竣工日期:2006  
4     [朝阳-酒仙桥]东四环北路10号   78807        ↓1.19%       竣工日期:2015  
5       [东城-东直门]香河园路1号  108111        ↑0.90%       竣工日期:2004  
6         [东城-交道口]府学胡同  159574            ——       竣工日期:2011  
7      [朝阳-百子湾]广渠东路33号   67951        ↑1.01%       竣工日期:2007  
8       [丰台-石榴庄]光彩路26号   51118        ↓0.45%       竣工日期:1992  
9        [朝阳-芍药居]北四环东路   84190        ↓0.08%       竣工日期:1999  
10   [朝阳-朝阳公园]东四环北路88号   94840        ↓0.57%       竣工日期:2005  
11    [西城-金融街]太平桥大街84号  186905        ↓1.19%       竣工日期:1999  
12        [朝阳-朝青板块]青年路   74450        ↑0.75%       竣工日期:2015  
13   [朝阳-大望路]百子湾南二路66号  141904        ↑1.69%       竣工日期:2011  
14         [石景山-鲁谷]鲁谷路   72368        ↑0.41%       竣工日期:2005  
15   [朝阳-百子湾]百子湾东里104号   64469        ↓1.26%       竣工日期:2000  
16     [朝阳-东大桥]向军北里28号   90292        ↓1.08%       竣工日期:2010  
17         [大兴-亦庄]泰河二街   57883        ↑0.91%       竣工日期:2015  
18       [怀柔-怀柔城区]滨湖北街   30969        ↑1.18%       竣工日期:1996  
19     [朝阳-双井]广渠门外大街7号  142920        ↓7.80%       竣工日期:2005  
20        [密云-密云周边]新中街   27593        ↑0.67%       竣工日期:1989  
21         [顺义-后沙峪]裕园路   72786        ↑1.80%       竣工日期:2004  
22         [昌平-北七家]七北路   65188        ↑3.96%       竣工日期:1994  
23        [海淀-温泉]温北路8号   63420        ↓0.14%       竣工日期:2012  
24         [昌平-北七家]立汤路   49720        ↑1.97%       竣工日期:2010  
25        [怀柔-怀柔城区]青春路   31991        ↓2.07%       竣工日期:2000  
26      [朝阳-酒仙桥]万西红街9号   94797        ↓0.43%       竣工日期:2010  
27  [朝阳-惠新西街]北四环东路108号   76771        ↑0.77%       竣工日期:2002  
28        [怀柔-怀柔城区]迎宾路   35512        ↓6.84%       竣工日期:2000  
29     [东城-崇文门]国瑞东路23号  104666        ↓0.01%       竣工日期:2005  
https://beijing.anjuke.com/community/p5
        title                                               link  \
0          一瓶    https://beijing.anjuke.com/community/view/52151   
1      西马金润家园  https://beijing.anjuke.com/community/props/sal...   
2    CLASS果岭里  https://beijing.anjuke.com/map/sale/#l1=39.877...   
3       首开畅心园   https://beijing.anjuke.com/community/round/52151   
4      珠江骏景北区  https://beijing.anjuke.com/community/trends/52151   
5        林奥嘉园  https://beijing.anjuke.com/community/photos2/b...   
6      万泉新新家园  https://beijing.anjuke.com/community/view/5215...   
7        公园悦府    https://beijing.anjuke.com/community/view/76073   
8      角门东里小区  https://beijing.anjuke.com/community/props/sal...   
9   北京新天地(东区)  https://beijing.anjuke.com/map/sale/#l1=39.837...   
10     双龙南里小区   https://beijing.anjuke.com/community/round/76073   
11       华清嘉园  https://beijing.anjuke.com/community/trends/76073   
12      首开香溪郡  https://beijing.anjuke.com/community/photos2/b...   
13      金隅丽景园  https://beijing.anjuke.com/community/view/7607...   
14       今日家园   https://beijing.anjuke.com/community/view/115697   
15  珠光逸景(一号院)  https://beijing.anjuke.com/community/props/sal...   
16       首邑溪谷  https://beijing.anjuke.com/map/sale/#l1=40.007...   
17        上林溪  https://beijing.anjuke.com/community/round/115697   
18       中海凯旋  https://beijing.anjuke.com/community/trends/11...   
19         观唐  https://beijing.anjuke.com/community/photos2/b...   
20       紫金长安  https://beijing.anjuke.com/community/view/1156...   
21     中海紫御公馆   https://beijing.anjuke.com/community/view/476977   
22    溪山嘉园东府里  https://beijing.anjuke.com/community/props/sal...   
23       九章别墅  https://beijing.anjuke.com/map/sale/#l1=39.925...   
24       三嘉信苑  https://beijing.anjuke.com/community/round/476977   
25     天通苑西三区  https://beijing.anjuke.com/community/trends/47...   
26       鹏润家园  https://beijing.anjuke.com/community/photos2/b...   
27       西山枫林  https://beijing.anjuke.com/community/view/4769...   
28  青春路66-68院    https://beijing.anjuke.com/community/view/61045   
29       龙城花园  https://beijing.anjuke.com/community/props/sal...   

               address   price to_last_month completion_date  
0        [西城-陶然亭]陶然亭2号  139949        ↓0.34%       竣工日期:2003  
1          [丰台-角门]马家堡路   59967        ↓0.63%       竣工日期:2005  
2         [朝阳-望京]广泽路6号  105040        ↑0.15%       竣工日期:2003  
3       [朝阳-常营]五里桥一街3号   44422        ↓1.09%       竣工日期:2010  
4      [丰台-木樨园]永外果园43号   61324        ↑0.02%       竣工日期:2004  
5          [朝阳-北苑]清林东路   62982        ↑0.64%       竣工日期:2015  
6       [海淀-万柳]巴沟南路35号  143446        ↑0.73%       竣工日期:2000  
7   [昌平-回龙观]文华东路,近回南北路   58485        ↑1.64%       竣工日期:2015  
8     [丰台-角门]角门路,近马家堡路   57102        ↓1.07%       竣工日期:2015  
9         [朝阳-管庄]朝阳路5号   55603        ↓0.39%       竣工日期:2004  
10         [朝阳-华威桥]双龙路   57521        ↑0.12%       竣工日期:1998  
11  [海淀-五道口]成府路,近中关村东路  124314        ↑1.63%       竣工日期:2001  
12          [通州-北关]通顺路   38522        ↓0.67%       竣工日期:2015  
13         [朝阳-常营]朝阳北路   45926        ↓2.29%       竣工日期:2010  
14       [海淀-五棵松]西翠路5号   72633        ↑0.10%       竣工日期:2000  
15      [丰台-长辛店]太柏西路1号   36971        ↓1.79%       竣工日期:2013  
16       [大兴-高米店]兴泰街5号   67844        ↓0.51%       竣工日期:2012  
17        [海淀-上地]安宁庄东路   79942        ↓0.07%       竣工日期:2010  
18      [西城-金融街]太平桥98号  181548        ↓2.11%       竣工日期:2004  
19      [朝阳-来广营]观唐东路1号  105675        ↑3.76%       竣工日期:2004  
20      [海淀-五棵松]西翠路17号  126309        ↑1.45%       竣工日期:2004  
21     [东城-永定门]永定门西滨河路  111905        ↑1.31%       竣工日期:2010  
22     [海淀-四季青]旱河路131号   44945        ↓2.57%       竣工日期:2004  
23      [朝阳-朝阳周边]东苇路3号  105468       ↓10.28%       竣工日期:2014  
24          [海淀-上庄]沙阳路   42976        ↓0.48%       竣工日期:2015  
25         [昌平-天通苑]立汤路   36551        ↑0.39%       竣工日期:2015  
26     [丰台-菜户营]菜户营甲88号   66342        ↑2.46%       竣工日期:2003  
27       [石景山-八大处]香山南路   52012        ↓0.27%       竣工日期:2004  
28        [怀柔-怀柔城区]青春路   30933        ↓2.01%       竣工日期:暂无数据  
29         [昌平-龙泽]京藏高速   70676        ↑7.15%       竣工日期:1997  
https://beijing.anjuke.com/community/p6
         title                                               link  \
0     后现代城(D区)   https://beijing.anjuke.com/community/view/482564   
1          茉藜园  https://beijing.anjuke.com/community/props/sal...   
2   珠江罗马嘉园(东区)  https://beijing.anjuke.com/map/sale/#l1=39.897...   
3         京棉新城  https://beijing.anjuke.com/community/round/482564   
4          炫特区  https://beijing.anjuke.com/community/trends/48...   
5      府前东街9号院  https://beijing.anjuke.com/community/photos2/b...   
6         松榆西里  https://beijing.anjuke.com/community/view/4825...   
7        西坝河东里   https://beijing.anjuke.com/community/view/122780   
8          红玺台  https://beijing.anjuke.com/community/props/sal...   
9        宋家庄家园  https://beijing.anjuke.com/map/sale/#l1=40.039...   
10        华威西里  https://beijing.anjuke.com/community/round/122780   
11  远洋一方润园(西区)  https://beijing.anjuke.com/community/trends/12...   
12      强佑清河新城  https://beijing.anjuke.com/community/photos2/b...   
13       农光里小区  https://beijing.anjuke.com/community/view/1227...   
14    柏林爱乐(二期)   https://beijing.anjuke.com/community/view/943600   
15    亿城西山华府禧园  https://beijing.anjuke.com/community/props/sal...   
16       远洋新干线  https://beijing.anjuke.com/map/sale/#l1=39.924...   
17       融城园北区  https://beijing.anjuke.com/community/round/943600   
18       香水城南区  https://beijing.anjuke.com/community/trends/94...   
19      天润福熙大道  https://beijing.anjuke.com/community/photos2/b...   
20         杨家园  https://beijing.anjuke.com/community/view/9436...   
21     中铁华侨城和园    https://beijing.anjuke.com/community/view/51715   
22        朝庭公寓  https://beijing.anjuke.com/community/props/sal...   
23         大方居  https://beijing.anjuke.com/map/sale/#l1=39.919...   
24      首开国风北京   https://beijing.anjuke.com/community/round/51715   
25   西山壹号院(南区)  https://beijing.anjuke.com/community/trends/51715   
26     百子湾家园B区  https://beijing.anjuke.com/community/photos2/b...   
27    北街家园(六区)  https://beijing.anjuke.com/community/view/5171...   
28        利泽西园   https://beijing.anjuke.com/community/view/805525   
29    丽景长安(一期)  https://beijing.anjuke.com/community/props/sal...   

                address   price to_last_month completion_date  
0         [朝阳-双井]百子湾南一路   68224        ↑1.87%       竣工日期:2002  
1            [朝阳-北苑]春华路   54190        ↓3.39%       竣工日期:2004  
2         [朝阳-朝青板块]朝阳北路   72470        ↑2.41%       竣工日期:2003  
3           [朝阳-十里堡]朝阳路   56269        ↑0.04%       竣工日期:2005  
4         [朝阳-石佛营]石佛营东路   64454        ↑1.23%       竣工日期:2005  
5       [怀柔-怀柔城区]府前东街9号   34127        ↓3.16%       竣工日期:暂无数据  
6       [朝阳-潘家园]松榆北路34号   62533        ↓1.80%       竣工日期:2015  
7         [朝阳-西坝河]北三环东路   70788        ↓0.57%       竣工日期:1990  
8       [朝阳-太阳宫]太阳宫二街3号  163477        ↑0.10%       竣工日期:2012  
9          [丰台-宋家庄]石榴庄路   57224        ↑4.64%       竣工日期:2007  
10     [朝阳-潘家园]华威西里甲42号   61241        ↓0.52%       竣工日期:1993  
11        [朝阳-管庄]塔营北街6号   47306        ↓1.81%       竣工日期:2010  
12  [海淀-清河]京藏高速辅路,近清河中街   71172        ↑2.06%       竣工日期:2008  
13          [朝阳-劲松]南磨房路   63855        ↑0.79%       竣工日期:1985  
14           [朝阳-常营]管庄路   57899        ↑1.47%       竣工日期:2004  
15        [海淀-马连洼]马连洼南路   92905        ↑1.00%       竣工日期:2008  
16          [朝阳-三元桥]霄云路   75441        ↑2.40%       竣工日期:2005  
17        [怀柔-怀柔城区]南华大街   28367        ↑4.67%       竣工日期:2006  
18         [怀柔-怀柔城区]杨艳路   28910        ↑2.94%       竣工日期:2010  
19       [朝阳-北苑]清河营东路1号   82773        ↑0.33%       竣工日期:2016  
20         [怀柔-怀柔城区]迎宾路   32492        ↑0.34%       竣工日期:1998  
21         [大兴-旧宫]公园北环路   50660        ↓0.02%       竣工日期:2019  
22         [朝阳-望京]阜荣街8号   76496        ↑2.05%       竣工日期:2008  
23     [通州-九棵树]半壁店大街25号   36224        ↓0.81%       竣工日期:2007  
24      [朝阳-望京]望京东园607号   83059        ↑0.12%       竣工日期:2008  
25        [海淀-西北旺]圆明园西路  105412        ↓0.04%       竣工日期:2011  
26        [朝阳-百子湾]百子湾1号   52580        ↓1.90%       竣工日期:2003  
27        [昌平-沙河]北沙河西三路   48298        ↓1.66%       竣工日期:2009  
28         [朝阳-望京]广顺北大街   71881        ↓3.59%       竣工日期:2015  
29       [门头沟-永定]石龙南路3号   44668        ↓0.49%       竣工日期:2013  
https://beijing.anjuke.com/community/p7
        title                                               link  \
0   珠光逸景(二号院)   https://beijing.anjuke.com/community/view/952529   
1       御汤山熙园  https://beijing.anjuke.com/community/props/sal...   
2      山水文园西园  https://beijing.anjuke.com/map/sale/#l1=39.834...   
3       芳古园一区  https://beijing.anjuke.com/community/round/952529   
4         中国玺  https://beijing.anjuke.com/community/trends/95...   
5      加州水郡西区  https://beijing.anjuke.com/community/photos2/b...   
6      公园1872  https://beijing.anjuke.com/community/view/9525...   
7       金色漫香苑   https://beijing.anjuke.com/community/view/952581   
8        金地名京  https://beijing.anjuke.com/community/props/sal...   
9       珠江壹千栋  https://beijing.anjuke.com/map/sale/#l1=40.182...   
10  首创澜茵山(别墅)  https://beijing.anjuke.com/community/round/952581   
11       新怡家园  https://beijing.anjuke.com/community/trends/95...   
12     育新花园北里  https://beijing.anjuke.com/community/photos2/b...   
13     天通苑北二区  https://beijing.anjuke.com/community/view/9525...   
14     天通苑北一区   https://beijing.anjuke.com/community/view/167107   
15      K2玉兰湾  https://beijing.anjuke.com/community/props/sal...   
16   海晟名苑(南区)  https://beijing.anjuke.com/map/sale/#l1=39.866...   
17        褐石园  https://beijing.anjuke.com/community/round/167107   
18     兴隆都市馨园  https://beijing.anjuke.com/community/trends/16...   
19     望京西园四区  https://beijing.anjuke.com/community/photos2/b...   
20      天宫院小区  https://beijing.anjuke.com/community/view/1671...   
21    芳城园(一区)    https://beijing.anjuke.com/community/view/77610   
22       万科星园  https://beijing.anjuke.com/community/props/sal...   
23       首开铂郡  https://beijing.anjuke.com/map/sale/#l1=39.868...   
24     望京花园西区   https://beijing.anjuke.com/community/round/77610   
25    首开熙悦山澜庭  https://beijing.anjuke.com/community/trends/77610   
26       金地仰山  https://beijing.anjuke.com/community/photos2/b...   
27       慧谷阳光  https://beijing.anjuke.com/community/view/7761...   
28      望京金茂府   https://beijing.anjuke.com/community/view/988917   
29        西环里  https://beijing.anjuke.com/community/props/sal...   

               address   price to_last_month completion_date  
0       [丰台-长辛店]太柏西路2号   36612        ↑0.76%       竣工日期:2013  
1    [昌平-小汤山北]顺沙路,近秦上路   57736        ↓0.17%       竣工日期:暂无数据  
2     [朝阳-华威桥]弘燕路,近西燕街   94287        ↓0.06%       竣工日期:2002  
3       [丰台-方庄]方庄蒲芳路9号   67957        ↓1.39%       竣工日期:1992  
4         [丰台-菜户营]玉林西路  108198        ↑4.26%       竣工日期:暂无数据  
5      [房山-长阳]昊天北大街48号   32470        ↑0.01%       竣工日期:2000  
6         [朝阳-十里堡]石佛营路   87900        ↓1.68%       竣工日期:2007  
7        [昌平-北七家]天权路2号   44421        ↑0.36%       竣工日期:2013  
8       [朝阳-四惠]力源里北街2号   88891        ↑5.10%       竣工日期:2009  
9       [昌平-北七家]定泗路99号   46390        ↓0.79%       竣工日期:2004  
10        [密云-密云城区]密关路   46696        ↑0.42%       竣工日期:2011  
11        [东城-崇文门]东兴隆街  136475        ↓0.15%       竣工日期:2004  
12        [大兴-大兴周边]育林街   23777        ↑3.40%       竣工日期:2010  
13      [昌平-天通苑]太平庄中二街   39676        ↑0.07%       竣工日期:1993  
14      [昌平-天通苑]太平庄中二街   42155        ↑2.02%       竣工日期:1993  
15        [通州-九棵树]怡乐北街   57503        ↑0.59%       竣工日期:2014  
16  [东城-东直门]东直门外大街乙36号  124240        ↓0.56%       竣工日期:2008  
17     [海淀-清华大学]中关村北大街  117546        ↑0.40%       竣工日期:2015  
18     [东城-崇文门]东兴隆街58号  103604        ↓2.64%       竣工日期:2003  
19        [朝阳-望京]阜通西大街   64881        ↓0.45%       竣工日期:1997  
20   [大兴-生物医药基地]庆丰西路1号   31874        ↑0.28%       竣工日期:2012  
21          [丰台-方庄]方庄路   62836        ↓0.01%       竣工日期:1997  
22         [朝阳-媒体村]安立路   78596        ↑0.01%       竣工日期:2001  
23      [朝阳-三里屯]新东路12号   93971        ↑0.84%       竣工日期:2011  
24        [朝阳-望京]利泽中二路   76077        ↑0.50%       竣工日期:1998  
25         [房山-长阳]长政南街   43135        ↑0.16%       竣工日期:2016  
26      [大兴-高米店]乐园路22号   58404        ↑0.80%       竣工日期:2012  
27         [朝阳-望京]阜安西路   89554        ↓0.03%       竣工日期:2004  
28     [朝阳-来广营]来广营西路4号  111773        ↑0.34%       竣工日期:2014  
29        [昌平-昌平县城]西环路   38788        ↑0.29%       竣工日期:2000  
https://beijing.anjuke.com/community/p8
        title                                               link  \
0    润枫水尚(东区)   https://beijing.anjuke.com/community/view/852083   
1      保利中央公园  https://beijing.anjuke.com/community/props/sal...   
2       领秀翡翠山  https://beijing.anjuke.com/map/sale/#l1=39.927...   
3      东区国际公寓  https://beijing.anjuke.com/community/round/852083   
4          臻园  https://beijing.anjuke.com/community/trends/85...   
5          御园  https://beijing.anjuke.com/community/photos2/b...   
6        万科如园  https://beijing.anjuke.com/community/view/8520...   
7        海特花园   https://beijing.anjuke.com/community/view/368991   
8       栖美园小区  https://beijing.anjuke.com/community/props/sal...   
9      世贸国际公寓  https://beijing.anjuke.com/map/sale/#l1=39.997...   
10  柏泉庄园雁鸣园B区  https://beijing.anjuke.com/community/round/368991   
11     天通苑东一区  https://beijing.anjuke.com/community/trends/36...   
12     首开国风美仑  https://beijing.anjuke.com/community/photos2/b...   
13       润枫锦尚  https://beijing.anjuke.com/community/view/3689...   
14     西钓鱼台嘉园   https://beijing.anjuke.com/community/view/597508   
15        朗琴园  https://beijing.anjuke.com/community/props/sal...   
16      金隅泰和园  https://beijing.anjuke.com/map/sale/#l1=39.799...   
17      金隅万科城  https://beijing.anjuke.com/community/round/597508   
18       康泽佳苑  https://beijing.anjuke.com/community/trends/59...   
19       金蝉南里  https://beijing.anjuke.com/community/photos2/b...   
20       枫丹丽舍  https://beijing.anjuke.com/community/view/5975...   
21       川北小区    https://beijing.anjuke.com/community/view/51419   
22     田村33号院  https://beijing.anjuke.com/community/props/sal...   
23        智学苑  https://beijing.anjuke.com/map/sale/#l1=39.913...   
24    天鹅湾(北区)   https://beijing.anjuke.com/community/round/51419   
25   国美第一城3号院  https://beijing.anjuke.com/community/trends/51419   
26      智地香蜜湾  https://beijing.anjuke.com/community/photos2/b...   
27      鸿坤花语墅  https://beijing.anjuke.com/community/view/5141...   
28        原生墅   https://beijing.anjuke.com/community/view/573178   
29      圆明园花园  https://beijing.anjuke.com/community/props/sal...   

               address   price to_last_month completion_date  
0         [朝阳-朝青板块]青年路   78726        ↑2.62%       竣工日期:2007  
1          [朝阳-望京]宏泰东街  121876        ↑0.10%       竣工日期:2012  
2        [丰台-云岗]长青路88号   40714        ↓4.04%       竣工日期:2015  
3         [朝阳-四惠]慈云寺1号   63931        ↓1.08%       竣工日期:2000  
4         [朝阳-望京]来广营西路   97253        ↓1.22%       竣工日期:2014  
5    [海淀-西苑]玉泉山路,近厢红旗路   97141        ↓0.32%       竣工日期:2012  
6          [海淀-西北旺]永丰路   95126        ↑1.52%       竣工日期:2013  
7         [石景山-苹果园]西井路   47847        ↑2.60%       竣工日期:1993  
8     [怀柔-怀柔城区]雁栖大街51号   26514        ↑3.37%       竣工日期:2000  
9        [朝阳-工体]光华路甲9号   91722        ↓0.67%       竣工日期:2002  
10       [怀柔-怀柔城区]雁栖大街   26402        ↑1.14%       竣工日期:暂无数据  
11       [昌平-天通苑]太平庄东路   39795        ↓1.51%       竣工日期:2015  
12      [通州-马驹桥]兴贸二街5号   35166        ↓0.03%       竣工日期:2013  
13      [大兴-旧宫]徳贤路239号   44640        ↓1.18%       竣工日期:2011  
14      [海淀-航天桥]阜成路36号  104752        ↓0.70%       竣工日期:2006  
15   [西城-广安门外]手帕口南街甲1号  109293        ↑0.64%       竣工日期:2002  
16     [朝阳-朝青板块]高井北街7号   53871        ↑0.12%       竣工日期:2014  
17     [昌平-昌平县城]南环路10号   44286        ↑0.84%       竣工日期:2010  
18       [房山-长阳]长泽北街9号   44850       ↑35.03%       竣工日期:2011  
19          [朝阳-垡头]垡头路   59193        ↓0.11%       竣工日期:2015  
20     [海淀-西三旗]建材城中路1号   73920        ↑0.82%       竣工日期:2000  
21       [延庆-延庆城区]东外大街   25434        ↑0.29%       竣工日期:2000  
22       [海淀-田村]田村路33号   55645        ↑0.84%       竣工日期:1999  
23    [海淀-西二旗]西二旗西路29号   59927        ↓0.22%       竣工日期:1999  
24      [朝阳-朝青板块]甘露园中街  114163        ↓2.59%       竣工日期:2008  
25    [朝阳-朝青板块]青年路西里3号   64897        ↑0.60%       竣工日期:2007  
26  [顺义-后沙峪]后沙峪裕民大街38号   47682        ↓0.58%       竣工日期:2010  
27     [朝阳-华威桥]西大望路42号  109952        ↑0.37%       竣工日期:2011  
28          [大兴-黄村]康庄路   53742        ↓3.42%       竣工日期:2003  
29    [海淀-马连洼]圆明园西路88号   75087        ↓1.05%       竣工日期:1998  
https://beijing.anjuke.com/community/p9
          title                                               link  \
0          枣园小区    https://beijing.anjuke.com/community/view/50495   
1           新安里  https://beijing.anjuke.com/community/props/sal...   
2         南湖渠西里  https://beijing.anjuke.com/map/sale/#l1=39.751...   
3        麓景嘉园北里   https://beijing.anjuke.com/community/round/50495   
4           清芷园  https://beijing.anjuke.com/community/trends/50495   
5     北纬40度(东区)  https://beijing.anjuke.com/community/photos2/b...   
6          国融国际  https://beijing.anjuke.com/community/view/5049...   
7   北京城建上河湾(南区)    https://beijing.anjuke.com/community/view/76980   
8       新里西斯莱公馆  https://beijing.anjuke.com/community/props/sal...   
9          励骏华庭  https://beijing.anjuke.com/map/sale/#l1=39.739...   
10       天通苑西二区   https://beijing.anjuke.com/community/round/76980   
11     方庄南路18号院  https://beijing.anjuke.com/community/trends/76980   
12       中骏西山天璟  https://beijing.anjuke.com/community/photos2/b...   
13     住欣家园(东区)  https://beijing.anjuke.com/community/view/7698...   
14         望园东里    https://beijing.anjuke.com/community/view/56940   
15   亿城燕西华府(别墅)  https://beijing.anjuke.com/community/props/sal...   
16      南华园(一区)  https://beijing.anjuke.com/map/sale/#l1=39.992...   
17          方舟苑   https://beijing.anjuke.com/community/round/56940   
18          金星园  https://beijing.anjuke.com/community/trends/56940   
19         浅山香邑  https://beijing.anjuke.com/community/photos2/b...   
20         碧海方舟  https://beijing.anjuke.com/community/view/5694...   
21       华业玫瑰东方   https://beijing.anjuke.com/community/view/850534   
22       顶秀金石家园  https://beijing.anjuke.com/community/props/sal...   
23     兴隆家园(北区)  https://beijing.anjuke.com/map/sale/#l1=40.112...   
24         盛嘉华苑  https://beijing.anjuke.com/community/round/850534   
25     旭东嘉园上海沙龙  https://beijing.anjuke.com/community/trends/85...   
26          西潞园  https://beijing.anjuke.com/community/photos2/b...   
27         紫御华府  https://beijing.anjuke.com/community/view/8505...   
28       万城华府玺园    https://beijing.anjuke.com/community/view/79637   
29       中冶德贤公馆  https://beijing.anjuke.com/community/props/sal...   

                 address   price to_last_month completion_date  
0            [大兴-枣园]兴华大街   41739        ↓0.16%       竣工日期:2001  
1             [大兴-黄村]团河路   34434        ↓0.06%       竣工日期:2015  
2            [朝阳-望京]望京西路   68110        ↑0.85%       竣工日期:1988  
3         [海淀-海淀周边]苏家坨北路   37730        ↓0.79%       竣工日期:暂无数据  
4         [西城-陶然亭]育新街47号  103544        ↓0.93%       竣工日期:2003  
5           [朝阳-望京]广达路2号   78309        ↓0.09%       竣工日期:2008  
6          [大兴-亦庄]荣华中路7号   31600        ↑5.15%       竣工日期:2008  
7        [密云-密云城区]李各庄路6号   26147        ↑0.13%       竣工日期:2015  
8             [大兴-黄村]辅高路   54607        ↑0.60%       竣工日期:2009  
9          [东城-东单]金宝街90号  159699        ↑0.80%       竣工日期:2006  
10           [昌平-天通苑]立汤路   40730        ↓1.09%       竣工日期:2015  
11       [丰台-成寿寺]方庄南路18号   50289        ↑0.08%       竣工日期:2013  
12  [门头沟-大峪]北京西山永定楼北300米   58166        ↓0.09%       竣工日期:2018  
13           [朝阳-常营]朝阳北路   45437        ↓0.92%       竣工日期:2010  
14      [丰台-七里庄]丰台北路125号   59636        ↓0.05%       竣工日期:2000  
15         [丰台-云岗]泉湖西路1号   39055        ↑0.77%       竣工日期:2012  
16          [怀柔-怀柔城区]南大街   30502        ↑2.26%       竣工日期:1983  
17      [朝阳-花家地]北四环东路甲9号   66906        ↑0.73%       竣工日期:1998  
18         [朝阳-太阳宫]太阳宫南街   97537        ↑1.06%       竣工日期:1995  
19        [顺义-杨镇]浅香北街16号   21621        ↓0.12%       竣工日期:2012  
20         [朝阳-亚运村]鼎成路6号  196631        ↑2.25%       竣工日期:2003  
21         [朝阳-CBD]延静里中街   87016        ↑0.66%       竣工日期:2005  
22        [丰台-宋家庄]金桥东街6号   45227        ↑0.28%       竣工日期:2013  
23        [朝阳-高碑店]建国路29号   60497        ↑0.50%       竣工日期:1999  
24         [大兴-黄村]团河路48号   34378        ↓1.21%       竣工日期:2012  
25           [大兴-亦庄]天宝西路   58602        ↓0.06%       竣工日期:2003  
26        [房山-良乡]良乡西潞北大街   33502        ↓0.99%       竣工日期:1993  
27      [朝阳-奥林匹克公园]安立路7号   97135        ↑6.24%       竣工日期:2012  
28           [海淀-万柳]万柳西路  163567        ↓0.27%       竣工日期:2009  
29            [大兴-旧宫]德贤路   66054        ↓0.47%       竣工日期:2016  
https://beijing.anjuke.com/community/p10
         title                                               link  \
0         水墨林溪    https://beijing.anjuke.com/community/view/52304   
1    帽儿胡同5号四合院  https://beijing.anjuke.com/community/props/sal...   
2       西局欣园南区  https://beijing.anjuke.com/map/sale/#l1=39.688...   
3         新康家园   https://beijing.anjuke.com/community/round/52304   
4       丽水莲花小区  https://beijing.anjuke.com/community/trends/52304   
5        团河苑小区  https://beijing.anjuke.com/community/photos2/b...   
6         上地东里  https://beijing.anjuke.com/community/view/5230...   
7      西罗园南里社区   https://beijing.anjuke.com/community/view/867918   
8      泛海国际兰海园  https://beijing.anjuke.com/community/props/sal...   
9       八角北路社区  https://beijing.anjuke.com/map/sale/#l1=39.936...   
10    领秀新硅谷CD区  https://beijing.anjuke.com/community/round/867918   
11      龙湖双珑原著  https://beijing.anjuke.com/community/trends/86...   
12       中信国安府  https://beijing.anjuke.com/community/photos2/b...   
13     怡海花园富润园  https://beijing.anjuke.com/community/view/8679...   
14      贵园南里丙区   https://beijing.anjuke.com/community/view/942901   
15        保利垄上  https://beijing.anjuke.com/community/props/sal...   
16     椿树园奥运社区  https://beijing.anjuke.com/map/sale/#l1=39.868...   
17  京润水上花园(别墅)  https://beijing.anjuke.com/community/round/942901   
18      中海北京世家  https://beijing.anjuke.com/community/trends/94...   
19      北下洼子胡同  https://beijing.anjuke.com/community/photos2/b...   
20        金港国际  https://beijing.anjuke.com/community/view/9429...   
21        九号公寓    https://beijing.anjuke.com/community/view/55972   
22        逸成东苑  https://beijing.anjuke.com/community/props/sal...   
23        北京香颂  https://beijing.anjuke.com/map/sale/#l1=39.800...   
24        九龙花园   https://beijing.anjuke.com/community/round/55972   
25        幸福二村  https://beijing.anjuke.com/community/trends/55972   
26         莱蒙湖  https://beijing.anjuke.com/community/photos2/b...   
27      世茂奥临花园  https://beijing.anjuke.com/community/view/5597...   
28      北京银泰中心    https://beijing.anjuke.com/community/view/52893   

              address   price to_last_month completion_date  
0          [房山-窦店]大窦路   21208        ↑0.06%       竣工日期:2006  
1      [东城-交道口]帽儿胡同5号  199729        ↑8.19%       竣工日期:2006  
2         [丰台-七里庄]万丰路   71996        ↓1.74%       竣工日期:2002  
3         [大兴-亦庄]北环西路   48486        ↓0.68%       竣工日期:2000  
4    [西城-广安门外]莲花河胡同1号   97789        ↑1.67%       竣工日期:2006  
5          [大兴-黄村]兴亦路   36668        ↓0.91%       竣工日期:1984  
6          [海淀-上地]信息路  135003        ↑2.42%       竣工日期:1993  
7    [丰台-西罗园]南三环中路26号   55885        ↑1.79%       竣工日期:1996  
8    [朝阳-朝阳公园]辛庄一街28号  117543        ↓0.03%       竣工日期:2009  
9     [石景山-八角]八角北路44号   50722        ↓0.43%       竣工日期:1981  
10    [海淀-西二旗]西二旗西路1号   80877        ↑0.65%       竣工日期:2010  
11       [朝阳-孙河]景达路1号   80624            ——       竣工日期:2015  
12   [西城-宣武门]前青厂胡同66号  179852        ↓0.06%       竣工日期:2017  
13      [丰台-科技园区]恒富中街   58423        ↑0.93%       竣工日期:2001  
14        [大兴-亦庄]西环北路   46409        ↑0.45%       竣工日期:2002  
15     [昌平-小汤山北]立汤路9号   40562        ↓0.10%       竣工日期:2000  
16       [西城-宣武门]永光东街  113386        ↑0.06%       竣工日期:1999  
17     [朝阳-三元桥]霄云路18号  118168        ↓0.13%       竣工日期:2001  
18       [大兴-亦庄]三海子东路   66029        ↑6.65%       竣工日期:2017  
19     [东城-安定门]北下洼子胡同  257800        ↓0.32%       竣工日期:1960  
20    [朝阳-大望路]西大望路19号   86324        ↓0.10%       竣工日期:2002  
21   [朝阳-朝阳公园]朝阳公园路9号   72952        ↓1.19%       竣工日期:2008  
22      [海淀-学院路]月泉路9号   90317        ↓0.51%       竣工日期:2004  
23      [朝阳-望京]南湖西园南路   83440        ↑0.71%       竣工日期:2007  
24      [朝阳-双井]广渠路31号   60273        ↑0.03%       竣工日期:1998  
25         [朝阳-工体]春秀路   79829        ↓0.72%       竣工日期:1999  
26        [顺义-后沙峪]天北路   60669        ↑8.64%       竣工日期:2000  
27       [朝阳-北苑]清林路一号   79336        ↓0.28%       竣工日期:2000  
28  [朝阳-建外大街]建国门外大街2号  147512        ↑1.39%       竣工日期:2008  

2.2 Project:自动登录开课吧学习中心(Selenium)

# 自动登录开课吧学习中心 提交表单
import time
from selenium import webdriver

# 需要将chromedriver放到Chrome\Application目录下
chrome_driver = 'C:\Program Files (x86)\Google\Chrome\chromedriver.exe'
driver = webdriver.Chrome(executable_path=chrome_driver)

request_url = 'http://student.kaikeba.com/user/login'
driver.get(request_url)

driver.find_element_by_id('username').send_keys('88888888888')
driver.find_element_by_id('password').send_keys('XXXXXXXXXXX')
driver.find_element_by_class_name('submit').click()

 

注:在登录过程中,可能会涉及验证码的输入,会利用图像识别的技术,这里不做阐述(可以使用百度图像识别的接口:ai.baidu.com)

将验证码图片发给第三方平台进行识别,然后返回验证码的识别结果进行登录

更多AI资源请关注公众号:大胡子的AI

欢迎各位AI爱好者加入群聊交流学习:882345565(内有大量免费资源哦!)

;