python新闻评论分析_从新闻文章中提取评论

我的问题和这里问的问题类似：

https://stackoverflow.com/questions/14599485/news-website-comment-analysis

我试图从任何新闻文章中摘录评论。E、 g.我有一个新闻网址：

http://www.cnn.com/2013/09/24/politics/un-obama-foreign-policy/

我尝试在python中使用BeautifulSoup来提取注释。然而，注释部分似乎要么嵌入到iframe中，要么通过javascript加载。通过firebug查看源代码不会显示评论部分的源代码。但是通过浏览器的“查看源代码”功能显式地查看注释的源代码是正确的。如何提取评论，尤其是当评论来自新闻网页中嵌入的不同url时？在

这是我到现在为止所做的，虽然不多：import urllib2

from bs4 import BeautifulSoup

opener = urllib2.build_opener()

url = ('http://www.cnn.com/2013/08/28/health/stem-cell-brain/index.html')

urlContent = opener.open(url).read()

soup = BeautifulSoup(urlContent)

title = soup.title.text

print title

body = soup.findAll('body')

outfile = open("brain.txt","w+")

for i in body:

i=i.text.encode('ascii','ignore')

outfile.write(i +'\n')

如果您能帮我做些什么或如何去做，我们将不胜感激。在

python新闻评论分析_从新闻文章中提取评论相关推荐

python商品评论分析_亚马逊产品情感评论分析
import requests from lxml import etree import re import xlwt from openpyxl import workbook # 写入Excel ...
python新闻评论分析_使用 python 抓取并分析京东商品评论数据
本篇文章是python爬虫系列的第三篇,介绍如何抓取京东商城商品评论信息,并对这些评论信息进行分析和可视化.下面是要抓取的商品信息,一款女士文胸.这个商品共有红色,黑色和肤色三种颜色, 70B到90D ...
python 评论分析_基于Python-Snownlp的新闻评论数据分析
摘要网上热点新闻的评论不仅反映了民众对社会热点事件的关注程度,也反映了公众所表现出的各类情感价值和思想动态.基于Python- Snownlp经过数据采集,数据预处理,建立向量模型,数据挖掘与分析 ...
python新闻评论分析_新闻详情页
一,业务流程分析 1,功能 1,新闻详情 2,加载评论功能 3,添加评论功能二.新闻详情页 1,业务流程分析业务流程: 1,判断前端传递新闻ID是否为空,是否为整数,是否存在二,接口设计 1.接 ...
python酒店评论分析_对超过1M的酒店点评进行机器学习，发现有趣的见解
在之前的文章中,我们学会了如何训练一个机器学习分类器,用来检测酒店点评中提到的不同方面.使用这个方面分类器,我们可以自动的知道一个特定的点评是否在谈论清洁.舒适和设施.食品.网络.地点.工作人员以及/ ...
python商品评论分析_用python3爬取天猫商品评论并分析（1）
在上一篇文章我们已经完成数据的采集,并将数据存储在mysql,现在我们来继续后面的数据分析工作,先放出项目流程: 0.主要流程 0.数据采集 0. 目标网址获取 1. 爬虫框架选用注:了解这一步请登 ...
python爬取京东评论分析_【实战好文】|爬取京东书籍评论并分析
原标题:[实战好文]|爬取京东书籍评论并分析这是菜鸟学Python的粉丝第10篇原创投稿阅读本文大概需要5分钟本篇作者:小郑同学上周的赠书活动中,收到了楼主送的<利用Python进行数据 ...
python酒店评论分析_酒店舆情分析
Python进行携程酒店评论舆情分析第一步:分析设计我们是对酒店进行舆情分析,所有我们的核心是酒店的评论数据:对住客的评论数据进行特征提取,通过住客对酒店的评分,对数据进行分类,并使用朴素贝叶斯算 ...
python酒店评论分析_手把手用Python网络爬虫带你爬取全国著名高校附近酒店评论...
点击蓝色"Python空间"关注我丫加个"星标",每天一起快乐的学习今日鸡汤我站在鼓楼下边,一切繁华与我无关. /1 前言/ 简介:本文介绍如何用p ...

python新闻评论分析_从新闻文章中提取评论

python新闻评论分析_从新闻文章中提取评论相关推荐

最新文章

热门文章