基于Python实现的论坛帖子情感分析

一、课程项目

Scuinfo文本分类分析

二、项目类容

爬取川大匿名社区SCUinfo在一段时间内的帖子，对其进行情感分类分析，包括情绪分类（积极，消极），帖子内容关联分析等。

三、个人工作完成报告

3.1 工作概述

负责数据收集、预处理以及简单的情感分析

3.2 爬虫方案

scuinfo为动态加载网页，并且有移动端验证，尝试使用scrapy爬取数据失败，需要对爬虫进行大量定制优化，为了提高开发效率，最终使用了之前爬取QQ空间采用的方式：使用selenium库调用firefox浏览器驱动，该再通过代码模拟人为操作浏览器。获取到对应页面数据后，使用etree和xpath选取相应的目标节点数据。

优点：轻松解决网页动态加载，登录验证，移动端验证等问题

缺点：该方式需要一直保持浏览器前台运行，并且只能为单线程模式，爬取效率相对较低

源码下载的地址：https://www.write-bug.com/article/1272.html

基于Python实现的论坛帖子情感分析相关推荐

[源码和文档分享]基于Python实现的论坛帖子情感分析
一.课程项目 Scuinfo文本分类分析二.项目类容爬取川大匿名社区SCUinfo在一段时间内的帖子,对其进行情感分类分析,包括情绪分类(积极,消极),帖子内容关联分析等. 三.个人工作完成报告 ...
【人工智能毕设之基于Python+flask+bilstm的评论情感分析系统-哔哩哔哩】 https://b23.tv/QU56eTl
[人工智能毕设之基于Python+flask+bilstm的评论情感分析系统-哔哩哔哩] https://b23.tv/QU56eTl https://b23.tv/QU56eTl
基于Python实现的论坛帖子文本情感分析完整代码+数据可直接运行毕业设计
完整代码:https://download.csdn.net/download/qq_38735017/87425721 一.课程项目文本分类分析二.项目类容爬取川大匿名社区SCUinfo在一段 ...
基于Python的对网络评论情感分析：主题与情感词抽取
资源下载地址:https://download.csdn.net/download/sheziqiong/85661888 问题描述针对评论网站上的用户评论进行细粒度的情感分析,区别于传统的粗粒度的 ...
基于Python的微博大数据舆情分析，舆论情感分析可视化系统
运行效果图基于Python的微博大数据舆情分析,舆论情感分析可视化系统系统介绍微博舆情分析系统,项目后端分爬虫模块.数据分析模块.数据存储模块.业务逻辑模块组成. 先后进行了数据获取和筛选存储, ...
【自然语言处理（NLP）】基于FNN网络的电影评论情感分析
[自然语言处理(NLP)]基于FNN网络的电影评论情感分析作者简介:在校大学生一枚,华为云享专家,阿里云专家博主,腾云先锋(TDP)成员,云曦智划项目总负责人,全国高等学校计算机教学与产业实践资源建 ...
基于LSTM三分类的文本情感分析，采用LSTM模型，训练一个能够识别文本postive, neutral, negative三种
基于LSTM三分类的文本情感分析,采用LSTM模型,训练一个能够识别文本postive, neutral, negative三种 ,含数据集可直接运行完整代码下载地址:基于LSTM三分类的文本情感分 ...
基于SnowNLP的商品评论文本情感分析
摘要:情感文本电商情感标注分析研究是当前电商数据情感挖掘学术研究的重要热点,具有极高的国际应用价值.对当前电商手机在线商品评论词典进行情感文本电商情感标注分析与词典数据情感挖掘研究具有很 ...
基于电商产品评论数据情感分析
#!/usr/bin/env python # coding: utf-8# # -- 基于电商产品评论数据情感分析 --# ### 1.案例简介 # # 1.利用文本挖掘技术,对碎片化.非结构化的电 ...

基于Python实现的论坛帖子情感分析

基于Python实现的论坛帖子情感分析相关推荐

最新文章

热门文章