如果你不想学编程,数据采集爬虫也是可以用的。

简介

最近的一次组会,我们请来了一位分享嘉宾——15级研究生庞琳同学,给我们科研团队分享网站评论数据的采集。

还记得去年这个时候,庞琳过来找我,询问Python爬数据的问题。

她之前没有接触过任何编程技术,自学Python爬虫一段时间,觉得很吃力。

编写程序只是一个方面,毕竟还有许多样例可以参考。

许多网站对于爬虫并不友好,所以她时常遇到各种意想不到的问题。

针对她的具体情况,我直接给她推荐了几个第三方数据采集工具。

她看后很兴奋,回去之后就做了尝试。

后来又通过论坛发帖询问等方式,找到了一个更适合自己的采集器。

这样一来,她不需要编写任何代码,就完成了毕业论文里的数据采集工作。

预答辩之后,我邀请她过来,给我们团队分享数据爬取的具体流程。

庞琳以某个网站为例,展示了文章链接与评论数据的采集。

她做了很充分的准备,讲解非常细致。

演示之后,我让学生们趁热打铁,动手实践。

庞琳给他们进行了答疑辅导,手把手教他们爬取了指定网站的评论数据。

组会结束的时候,全体学生都觉得收获颇丰。

分享

我一直坚信,教是最好的学。

为了巩固学生们的学习成果,我让17级研究生马峥牵头,做了个视频教程,发布出来。

这样一来,不但锻炼了学生,也可以把相关的知识分享给更多有需要的人。

这个视频为你传递一个信息:

如果你不想学编程,数据采集爬虫也是可以用的。

希望观看视频后,你也亲自动手实践一下,抓一些真实网站的数据,体验那种兴奋与成就感。

视频的链接在这里。

讨论

看过视频后,你是否通过实践,成功收集到自己感兴趣的数据了?视频中有没有让你觉得疑惑的地方?你有哪些意见和改进建议?欢迎留言,把你的经验和思考分享给大家,我们一起交流讨论。

如果你对我的文章感兴趣,欢迎点赞,并且微信关注和置顶我的公众号“玉树芝兰”(nkwangshuyi)。

如果本文可能对你身边的亲友有帮助,也欢迎你把本文通过微博或朋友圈分享给他们。让他们一起参与到我们的讨论中来。

如何不编程,采集网站评论信息?(视频教程)相关推荐

  1. 采集腾讯视频里电视剧《在一起》的全部评论信息并且制作词云

    作业介绍 作业目标 Python爬取腾讯视频<在一起>评论,利用分词器处理数据,生成词云,将代码上传到Github 作业源代码 第一次个人编程代码 时间记录 步骤 具体做法 时间 1. 进 ...

  2. 大数据信息资料采集:中国知网文献资料网站数据信息资料爬取

    大数据信息资料采集:中国知网文献资料网站数据信息资料爬取 数据采集满足多种业务场景:适合产品.运营.销售.数据分析.政府机关.电商从业者.学术研究等多种身份职业. 舆情监控:全方位监测公开信息,抢先获 ...

  3. 采集网站特殊文件Meta信息

    采集网站特殊文件Meta信息 元(Meta)信息是描述文件的属性的特殊信息,如文件的所有者.联系方式.机构名.邮件地址等信息.而网站中常常会有共享的文档文件,如PDF.Excel.Word.这些文件均 ...

  4. 用python爬网站评论_python爬取携程景点评论信息

    今天要分析的网站是携程网,获取景点的用户评论,评论信息通过json返回API,页面是这个样子的 按下F12之后,F5刷新一下 具体需要URL Request的方式为POST,还需要你提取的哪一页,下面 ...

  5. Python 采集 Facebook 评论插件、留言外挂程序

    实现时间:2021-05-30 实现难度:★★★☆☆☆ 实现目标:采集 Facebook 评论插件.留言外挂程序的所有评论. 完整代码:https://github.com/TRHX/Python3- ...

  6. 从小白到程序员的攻略(适合自学编程的网站)

    随着信息时代.大数据时代.人工智能的发展,程序员这个行业也被推到了社会的浪尖上.人们对程序员的评价褒贬不一,而且各个程序员的编程水平和能力也参差不齐.程序员这个行业是一个要求自我进步的行业,对编程者本 ...

  7. 分享几个影视采集网站

    文章目录[隐藏] 前言 卧龙资源网 ok 资源网 最大资源网 135 资源网 123 资源网 前言 大概在 2018 年左右大批影视站崛起,个人影视站长越来越多,影视 cms 也如雨后春笋似的,其中以 ...

  8. 免费python编程自学网站-可以免费自学编程的12个网站

    编程学习 很多人包括一些企业家,和市场营销人员都认为学习编程对一个人走向成功十分有帮助.在过去的一年里,我一直在学习编程.它有助我成为一个更好的创业者,我甚至可以提供一些帮助,当我的团队需要解决一些b ...

  9. 实战项目!用PHP实现的编程论坛网站

    微信公众号:Java随笔录 关注可了解更多Java相关的技术分享.问题或建议,欢迎公众号留言! 文章目录 一.系统需求分析 1. 系统描述 2. 需求分析和应用程序功能 3. 系统常做的查询与更新 4 ...

最新文章

  1. java中日期的数据类型是啥_用于存储日期和时间的最合适的SQL和Java数据类型
  2. python爬虫赚钱途径-终于领会python爬虫赚钱的途径
  3. 二分类卷积核极限数量实验
  4. JPA保存数据异常:org.hibernate.AnnotationException: @COLUMN(s) NOT allowed ON a @ManyToOne property
  5. flash_erase and flash_eraseall
  6. Cracer渗透-下载安装软件
  7. Java学习--多态
  8. 高仿真的类-BeanDefinitionReader
  9. 计算机基础知识总结及自学,计算机基础知识的简单总结
  10. 从开发者角度谈Mysql主键
  11. Series和DataFrame、相关性及NaN处理
  12. 开发者看过来,5 行代码实现身份认证,Authing 如何做到的?
  13. 最全面的MySQL面试题大全-一
  14. Xcode6无法安装VVDocumenter插件的解决方法
  15. mysql 导出表结构或表数据的操作
  16. Mac上的网络视频会议软件
  17. 移动硬盘读取速度一般是多少
  18. 富媒体超级短信(多媒体短信、视频短信)亮点、应用场景
  19. c语言编程实现今日星期几,计算任何一天是星期几的C语言源代码.
  20. 让顶尖设计师教你10个色彩运用秘技,赶紧洗耳恭听吧!

热门文章

  1. python将照片转文字_Python将图片转化成文字
  2. 如果redis哨兵宕机了怎么办_Spring集成Redis做缓存,Redis宕机时Spring处理的问题
  3. md5加密后的数据如何解密_如何在云中加密数据
  4. 复制不用说yes的方法
  5. Python的regex模块——更强大的正则表达式引擎
  6. 数据scale过程用model更方便,可以保存到本地
  7. 服务器时间修改日志怎么查,查看云服务器的操作日志
  8. 微软商店安装包_搞定你的数学问题:微软发布新APP可以手写或扫描数学题进行解答...
  9. Java中需要全部小写的是,下列哪些是Java中常量的命名约定?A、全部为小写字母B、全部为大写字母C、大小写混合D、字与字之间...
  10. 天翼云从业认证课后习题(3.1天翼云计算产品)