分类：Python爬取影评

2022
05-30

详解如何用Python登录豆瓣并爬取影评

目录一、需求背景二、功能描述三、技术方案四、登录豆瓣1.分析豆瓣登录接口2.代码实现登录豆瓣3.保存会话状态4.这个Session对象是我们常说的session吗？五、爬取影评1.分析豆瓣影评接口2.爬取一条影评数据3.影评内容提取4.批量爬取六、分析影评1.使用结巴分词七、总结上一篇我们讲过Cookie相关的知识，了解到Cookie是为了交互式web而诞生的，它主要用于以下三个方面：会话状态管理（如用户登录状态、购物车、游戏分数或其它需... 继续阅读 >

2021
08-06

Python爬取哆啦A梦-伴我同行2豆瓣影评并生成词云图

目录一、前言二、豆瓣爬虫步骤三、最终效果如下四、词云图制作流程五、效果图一、前言通过这篇文章，你将会收货：①豆瓣电影数据的爬取；②手把手教你学会词云图的绘制；二、豆瓣爬虫步骤当然，豆瓣上面有很多其他的数据，值得我们爬取后做分析。但是本文我们仅仅爬取评论信息。待爬取网址：https://movie.douban.com/subject/34913671/comments?status=P由于只有一个字段，我们直接使用re正则表达式，解决该问题。那些爬虫... 继续阅读 >