影评情感分类（基于IMDB数据集）

回顾以前的笔记

在keras中，内置了imdb电影评分数据集，来进行评价预测

安装keras

conda install keras

conda就帮依赖全部搞定，记得加源

导入imdb

from keras.datasets import imdb

数据集简要说明

一个长长的英文句子，有的有几千单词，有的有几十，分类成好的评价和不好的评价

在数据中不是单词，而是单词的索引
一共就5万句子

import keras
from keras import layers
import matplotlib.pyplot as plt
%matplotlib inline
data = keras.datasets.imdb
max_word = 10000
# 加载前10000个单词 最大不超过10000
(x_train, y_train), (x_test, y_test) = data.load_data(num_words=max_word)

查看数据

x_train.shape, y_train.shape
OUT:
((25000,), (25000,))
x_train[0]
y_train[0]
OUT:
输出的是
词汇的index
输出的是
array([1, 0, 0, ..., 0, 1, 0], dtype=int64)
1 代表 正面评价 0 代表负面怕评价

加载index和词汇的对应关系

#加载词汇
word_index = data.get_word_index()
#将index和value 互换
index_word = dict((value, key) for key

影评情感分类（基于IMDB数据集）相关推荐

使用循环神经网络(RNN)实现影评情感分类
最近由于做论文的补充实验,需要在rnn上做一下算法验证.找了一下这个博客写的挺好的,但是也有一些bug,暂时先记录一下. 使用循环神经网络(RNN)实现影评情感分类作为对循环神经网络的实践,我用循环 ...
九、（1）情感分类——基于词典。评论。
九.(1)情感分类--基于词典.评论. ----数据集留言邮箱发送 # -*- coding: utf-8 -*- """ Created on Thu Jun 13 2 ...
情感分类问题IMDB实战(SimpleRNN，LSTM，GRU）
使用经典的 IMDB 影评数据集来完成情感分类任务. IMDB 影评数据集包含了50000 条用户评价,评价的标签分为消极和积极, 其中 IMDB 评级<5 的用户评价标注为0,即消极: IMD ...
【学习笔记】NLP之影评情感分类
本文对影评数据进行NLP情感分类,数据分为标注数据(含sentiment)和非标注数据(不含sentiment),数据25000条,列出前五条如下: 自然语言处理和文本分析的问题中,词袋(Bag of ...
深度学习笔记（3）——pytorch+TextCNN实现情感分类（外卖数据集）
文章目录 0 前言 1 数据准备 1.1 常量 1.2 加载数据集 2 数据预处理 3 文本表示 4 TextCNN模型 5 模型训练 6 模型评估 7 总览 8 完整代码 0 前言使用数据集:某外 ...
学习笔记(05):自然语言处理Word2Vec视频学习教程-影评情感分类任务概述
立即学习:https://edu.csdn.net/course/play/5226/106441?utm_source=blogtoedu pandas读入训练数据.
基于朴素贝叶斯和预训练Bert模型的中文句子情感分类实践
基于朴素贝叶斯和预训练Bert模型的中文句子情感分类实践 1.任务介绍本次实践选题为AI研习社2019年9月份举办的中文对话情感分析任务,并在原任务基础上进行了拓展.任务首先给定一中文语句数据集 ...
python 多分类情感词典_基于情感词典的文本情感分类
基于情感词典的文本情感分类传统的基于情感词典的文本情感分类,是对人的记忆和判断思维的最简单的模拟,如上图.我们首先通过学习来记忆一些基本词汇,如否定词语有"不",积极词语有&qu ...
中文文本情感分类（基于LSTM和textCNN）
中文新闻数据集负面文本: 正面文本: 数据文本都是用爬虫从网络上爬取的,由人工进行分类,在使用这些数据之前,需要先对文本进行预处理,预处理包括去除标点符号,停用词过滤和分词等,由于篇幅有限,这里就不 ...

影评情感分类（基于IMDB数据集）

影评情感分类（基于IMDB数据集）相关推荐

最新文章

热门文章