- 软件
豆瓣租房小组爬虫是一款采集豆瓣租房小组信息的工具，能够帮助中介或者找房源的用户快速找到适合自己的房源，可以甄别筛选，能够自定义筛选条件，有需要的用户不要错过了，欢迎下载使用！
此爬虫用python开发，基于gevent、pymongo、requests、lxml、Flask。
流程也相对较简单：
配置需要爬取的URL；
配置需要解析的信息元素，用XPATH完成；
配置代理；
配置监控周期、最大页数、并发数等；
运行爬虫，等待抓取，会自动根据配置定时爬取；
启动web服务，在前台搜索、排序等；
一、下载打开软件，首先设置要找的房源的地址。
二、接下来设置理想价位和排除关键词。
三、点击爬取即可获取房源信息，等待软件获取相关关键词房源。
四、利用typora软件打开爬取下来的MD文件即可看到房源信息。
如何设置豆瓣群组链接？
首先搜索某个地区租房，例如：北京租房
点进去要爬取的某个小组，例如第一个：北京租房
将页面拉到最下面有个> 更多小组讨论超链接，点进去
复制地址栏中地址（从/group开始复制到结尾），粘贴到软件设置豆瓣群组链接
有时候粘贴进软件会崩溃，不知道什么原因，建议把软件中原来的链接删除再粘贴进去。
将start=后边的数字50改成%d
完成
如何设置排除关键字？
排除关键字是标题和内容只要出现关键字就会排除掉该条租房信息。
例如默认是限女这个关键字，只要租房信息中包含限女生入住，只限女生等出现限女关键字的一律不爬。
多个关键字用|分隔，注意是英文的。
例如：限女|短租|整租，这三个关键字设置后，只要标题和内容出现这三个关键字软件就不会爬取。
关于识别标题中的价格
使用正则\b\d{4}\b识别标题中的价格信息，无法爬取少于1000元的信息。
关于爬取结果排序
先根据价格从小到大排序，价格相同根据发帖时间排序。
迷你迅雷3.0敏感资源高速下载版v3.0 最新版下载工具 / 7M
SoftDownloader三点软件下载工具v1.0 官方版下载工具 / 78.8M
IDM无限试用破解版v6.38.10.2 修订版下载工具 / 8.9M
Free Download Manager Chrome插件v3.0.50 插件版下载工具 / 235KB
fish文库下载器v3.2.8 免费版下载工具 / 4.8M
Motrix百度网盘助手Chrome插件v1.1 官方版下载工具 / 65KB
昵图网图片下载神器v2021 最新版下载工具 / 381KB
小红书无水印下载助手v1.1.0 免费版下载工具 / 2.5M
CCTV Videos Downloader(央视网视频下载软件)v1.0 最新版下载工具 / 7.2M
迅雷x完美破解版v10.1.29.698 无限加速版下载工具 / 97.3M迷你迅雷3.0敏感资源高速下载版v3.0 最新版下载工具 / 7MIDM无限试用破解版v6.38.10.2 修订版下载工具 / 8.9M
迅雷7破解版不升级无限加速v2020 最新版下载工具 / 26.5M
新片场视频下载工具v1.0 免费版下载工具 / 12.0MSoftDownloader三点软件下载工具v1.0 官方版下载工具 / 78.8MFree Download Manager Chrome插件v3.0.50 插件版下载工具 / 235KB
左小皓360doc文库内容复制工具v1.0 最新版下载工具 / 531KBfish文库下载器v3.2.8 免费版下载工具 / 4.8M小红书无水印下载助手v1.1.0 免费版下载工具 / 2.5M昵图网图片下载神器v2021 最新版下载工具 / 381KB
QQ游戏大厅2022官方下载正式版v5.41.57773.0 最新版
腾讯QQ下载v9.5.9 最新版
QQ电脑管家v15.0.22206.230 最新正式版
雷神模拟器精简工具v1.0 绿色版
企业微信电脑版v4.0.6.6516 官方PC版
美图秀秀电脑版v6.5.5.0 官方版
360游戏大厅电脑版v6.0.0.1052 最新版
迅雷11v11.3.9.1902 官方版
芒果TV客户端v6.5.5.0 官方版
网易云音乐pc客户端v2.9.8 官方版
BitComet(比特彗星)下载v1.79 官方版多国语言 / 23.2M
比特精灵(BitSpirit)v3.6.0.550 官方版中文 / 2.2M
硕鼠flv视频下载器v0.4.8.10 正式版中文 / 7.4M
迅雷u享版v3.2.0.472 最新版中文 / 27.1M
高清壁纸预览下载工具1.0 正式版中文 / 749KB
腾讯微云网盘电脑版v5.2.1208 pc客户端网络存储
360安全浏览器电脑版v13.1.5206.0 官方最新版浏览器类
Google Chrome浏览器v98.0.4758.102 官方中文版浏览器类
360极速浏览器v13.0.2290.0 官方版浏览器类
向日葵远程控制软件v12.5.0.44227 官方版远程控制
Foxmail邮箱v7.2.23.114 最新版电子邮件
QQ浏览器电脑版v10.8.4559.400 官方版浏览器类
WiFi共享大师电脑版v3.0.1.2 最新版网络共享
鄂公网安备 42011102000260号