晏硕 大数据技术·大一实践学期

项目简介：

本项目致力于全面、精准、高效地从携程平台爬取上海地区餐馆的各类信息。具体目标包括：完整获取上海超 100家餐馆的基础信息，如名称、地址、电话、营业时间；深度采集用户评价数据，包括评分、评价内容、评价时间等，数量预计达到1000条；准确提取餐馆特色菜品、人均消费、环境评分等特色信息，为后续的数据分析与应用筑牢根基

主要技术：

使用scrapy框架，利用xpath提取数据从MySQL数据库中提取数据并分析绘表

图1 评论数量累积分布函数图

图2 不同评分下的平均消费金额柱状图

图3 平均消费金额的箱线图

图4 评论数量与平均消费金额的散点图

图5 平均消费金额直方图

图6 平均消费金额和评论数量的二维核密度图