Python获取【长津湖】豆瓣电影影评数据信息

作者 : 开心源码 本文共1339个字,预计阅读时间需要4分钟 发布时间: 2022-05-14 共312人阅读

长津湖堪称今年票房最猛的电影了叭!截止21号票房已经突破50亿!长津湖YYDS!

当然现在涨势已经慢慢下来了,距离上次45亿过去了一周才涨了五个亿,上次咱们爬的是猫眼评论,那么我们就用Python来爬取豆瓣的电影评论,看看大家在豆瓣怎样说!

image

本文的文字及图片来源于网络,仅供学习、交流使用,不具备任何商业用途,如有问题请及时联络我们以作解决。

image

基本开发环境
  • Python 3.8

  • Pycharm

相关模块的使用
  • import csv

  • import requests

安装Python并增加到环境变量,pip安装需要的相关模块就可。

豆瓣的网站数据,没有什么反爬,同样也静态网页数据,所以很是简单~

代码展现
import requestsimport parselimport csvf = open('长津湖短评.csv', mode='a', encoding='utf-8-sig', newline='')csv_writer = csv.DictWriter(f, fieldnames=[    '客户名',    '能否看过',    '推荐',    '日期',    '点赞',    '内容',])csv_writer.writeheader()url = 'https://movie.douban.com/subject/25845392/comments?start=40&limit=20&status=P&sort=new_score'headers = {    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.71 Safari/537.36'}response = requests.get(url=url, headers=headers)selector = parsel.Selector(response.text)divs = selector.css('#comments div.comment-item')for div in divs:    name = div.css('.comment-info a::text').get()  # 客户名    span = div.css('.comment-info span:nth-child(2)::text').get()  # 能否看过    feel = div.css('.comment-info span:nth-child(3)::attr(title)').get()  # 推荐    date = div.css('.comment-info span:nth-child(4)::text').get().strip()  # 日期    content = div.css('.comment-content .short::text').get()  # 内容    vote = div.css('.comment-vote span::text').get()  # 点赞    dit = {        '客户名': name,        '能否看过': span,        '推荐': feel,        '日期': date,        '点赞': vote,        '内容': content,    }    csv_writer.writerow(dit)    print(dit)

imageimage文章结尾2.png

.

说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » Python获取【长津湖】豆瓣电影影评数据信息

发表回复