基于Python的重庆二手房爬取及分析

论文摘要

随着大数据时代的到来,信息出现了爆炸式的增长,计算机技术在大数据时代的重要性日益凸显[1]。本文以python爬虫框架scrapy为出发点,利用计算机技术,对贝壳找房网重庆在售二手房进行抓取,并进行数据分析,得出二手房分布区域最多的地方单价不一定是最高,房屋中介最喜欢的标题是户型方正等结论。

论文目录

• 1 背景
• 2 重庆贝壳二手房爬虫框架
•   2.1 Scrapy爬虫框架的介绍
•   2.2 scrapy爬虫框架的编写
•     2.2.1 创建项目文件
•     2.2.2 定义需要爬取的字段
•     2.2.3 爬虫文件的编写
•     2.2.4 数据的存储
• 3 数据分析
•   3.1 数据预处理
•   3.2 数据可视化
• 4 总结

文章来源

类型: 期刊论文

作者: 刘航

关键词: 计算机技术,爬虫,数据分析

来源: 电脑知识与技术 2019年36期

年度: 2019

分类: 信息科技

专业: 计算机软件及计算机应用,互联网技术

单位: 重庆师范大学

分类号: TP393.092;TP391.3

DOI: 10.14004/j.cnki.ckt.2019.4260

页码: 6-7+17

总页数: 3

文件大小: 1806K

下载量: 1095