温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

怎么用Python爬取美团旅游景点评论数据

发布时间:2021-07-28 18:20:51 来源:亿速云 阅读:953 作者:chen 栏目:大数据

这篇文章主要讲解了“怎么用Python爬取美团旅游景点评论数据”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“怎么用Python爬取美团旅游景点评论数据”吧!

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

今年的国庆节还有半个月就要来了,相信很多的小伙伴还是非常期待这个小长假的。国庆节是一年中的小长假,很多的朋友会选择旅行来度过。中国的旅游城市有很多,旅游景点也是数不胜数。

项目目标

爬取美团旅游景点评论

受害者网址

[https://chs.meituan.com/](https://chs.meituan.com/)

代码

安装库

pip install requests
pip install time

导入工具

import requests
import time

解析网站,爬取数据

for page in range(10, 101, 10):
    time.sleep(1)
    url = 'https://www.meituan.com/ptapi/poi/getcomment?id=1161635&offset=0&pageSize={}&sortType=1'.format(page)
    headers = {
        'Host': 'www.meituan.com',
        'Pragma': 'no - cache',
        'Referer': 'https: // www.meituan.com / zhoubianyou / 1161635 /',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
    }
    response = requests.get(url=url, headers=headers)
    html_data = response.json()
    info_data = html_data['comments']
    for i in info_data:
        info = i['comment']

保存数据

     for i in info_data:
        info = i['comment']
        with open('美团评论.csv', mode='a', encoding='utf-8-sig', newline='') as f:
            f.write(info)
            print(info)

运行代码,效果如下图

怎么用Python爬取美团旅游景点评论数据

感谢各位的阅读,以上就是“怎么用Python爬取美团旅游景点评论数据”的内容了,经过本文的学习后,相信大家对怎么用Python爬取美团旅游景点评论数据这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是亿速云,小编将为大家推送更多相关知识点的文章,欢迎关注!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI