4.如何在大数据框架下,对大众点评网的客户评价进行挖掘?可采

Question

如题所述

Answer 1

4.在大数据框架下，对大众点评网的客户评价进行挖掘的方法。
1、爬取网页后从html页面中把需要的字段信息顾客id，评论时间，评分，评论内容，口味，环境，服务，店铺ID提取出来并存储到MYSQL数据库中。
2、发现完整的评论都存储在’div’，'main-review’中，且部分页面口味，环境，服务并不是每一页都有，因此需要使用tryexcept防止程序中断。
3、使用MYSQL数据库，python连接MYSQL数据使用pymysql。需要先建立一个数据库和表，然后连接并定义游标，写对应的sql语句，执行事务。