百度学术
$list_arr = getbaiduxueshu($row['name']);
$list_arr = explode('(',$list_arr);
$list_arr = explode(')',$list_arr[1]);
$list_arr = json_decode($list_arr[0]);
$list_arr = $list_arr->s;

//百度学术平台热词地址
function getbaiduxueshu($keyname = '100'){
$url = 'http://nssug.baidu.com/su?wd='.$keyname.'&prod=xueshu&json=1&ie=utf-8&cb=jQuery1102054196148383364_1500255388940&_=1500255388947';
return (file_get_contents($url));
}

http://nssug.baidu.com/su?wd=%E4%B8%89%E5%86%9C&prod=xueshu&json=1&ie=utf-8&cb=jQuery1102054196148383364_1500255388940&_=1500255388947

360

http://sug.so.360.cn/suggest?callback=suggest_so&encodein=utf-8&encodeout=utf-8&format=xml&word=seo

命令行

http://www.hekaiyu.com/seogongju/110.html

curl-s'http://sug.so.360.cn/suggest?callback=suggest_so&encodein=utf-8&encodeout=utf-8&format=xml&word=seo'|grep"<word>"|grep-oP'(?<=<word>).*?(?=</word>)'

百度

https://sp0.baidu.com/5a1Fazu8AA54nxGko9WTAnF6hhy/su?wd=%E5%AE%97%E5%8A%9B&sugmode=2&json=1&p=3&sid=&req=2&bs=%E5%AE%97%E5%8A%9B&pbs=%E5%AE%97%E5%8A%9B&csor=3&pwd=%E5%AE%97%E5%8A%9B&cb=jQuery110206449440490690221_1491446428327&_=1491446428426&qq-pf-to=pcqq.group

https://sp0.baidu.com/5a1Fazu8AA54nxGko9WTAnF6hhy/su?wd=%E5%AE%97%E5%8A%9B&sugmode=2&json=1&p=3&sid=&req=2&bs=%E5%AE%97%E5%8A%9B&pbs=%E5%AE%97%E5%8A%9B&csor=3&pwd=%E5%AE%97%E5%8A%9B&cb=jQuery110206449440490690221_1491446428327&_=1491446428426&qq-pf-to=pcqq.group

粘贴到地址栏就可以看到效果

jQuery110206449440490690221_1491446428327({"q":"好牙膏","p":false,"bs":"好牙膏","csor":"3","status":0,"g":[ { "q": "好牙膏推荐", "t": "n", "st": { "q": "好牙膏推荐", "new": 0 } }, { "q": "壳好牙膏", "t": "n", "st": { "q": "壳好牙膏", "new": 0 } }, { "q": "美白效果最好牙膏", "t": "n", "st": { "q": "美白效果最好牙膏", "new": 0 } }, { "q": "好牙膏 绿蓝红黑", "t": "n", "st": { "q": "好牙膏 绿蓝红黑", "new": 0 } }, { "q": "好牙膏品牌", "t": "n", "st": { "q": "好牙膏品牌", "new": 0 } }, { "q": "好牙膏有什么标识", "t": "n", "st": { "q": "好牙膏有什么标识", "new": 0 } }, { "q": "什么牙膏好", "t": "n", "st": { "q": "什么牙膏好", "new": 0 } }, { "q": "好牙膏中国造", "t": "n", "st": { "q": "好牙膏中国造", "new": 0 } } ],"s":["好牙膏推荐","壳好牙膏","美白效果最好牙膏","好牙膏 绿蓝红黑","好牙膏品牌","好牙膏有什么标识","什么牙膏好","好牙膏中国造"]});

万方热词

//从万方数据平台抓取热词
function Posts($url, $post = null,$Token = ''){
$context = array();

if (is_array($post))
{
ksort($post);

$context['http'] = array
(

'timeout'=>60,
// 'header'=>"Token: ".$Token,
'header' => "Content-type: application/x-www-form-urlencoded ",
'method' => 'POST',
'content' => http_build_query($post, '', '&'),
);
}

return file_get_contents($url, false, stream_context_create($context));
}

//万方数据平台热词地址
function getwanfang($pageNo = '100' ,$pageSize = '1000'){
$url = 'http://new.wanfangdata.com.cn/hotTheme.do';
$data = array('pageNo' => $pageNo, 'pageSize' => $pageSize );
$json_list = Posts($url, $data);
return json_decode($json_list);
}

转载于:https://www.cnblogs.com/zongsir/p/7193867.html

抓取各个浏览器引擎关键字,,百度学术关键字相关推荐

  1. 【Fiddler】使用fiddler抓取指定浏览器的包

    使用fiddler抓取不到浏览器的包时常用的解决办法: 1.必须先打开Fiddler,再打开浏览器  2.Fiddler只能截取网页与服务器间的通信,无法截取游戏封包  3.Fiddler没有打开捕捉 ...

  2. fiddler无法抓取chrome浏览器请求的解决方案之关闭代理软件

    fiddler无法抓取chrome浏览器请求的解决方案之关闭代理软件 参考文章: (1)fiddler无法抓取chrome浏览器请求的解决方案之关闭代理软件 (2)https://www.cnblog ...

  3. 【解决抓包工具fiddler不抓取360浏览器的数据的问题】

    抓包工具fiddler不抓取360浏览器的数据 fiddler可以抓到Firefox浏览器的包,但是抓不到360浏览器的包. 操作步骤: 打开Fiddler -> 菜单栏 工具(Tools )- ...

  4. fiddler4如何只抓取指定浏览器的包

    在实际工作中,常常会抓取浏览器的数据,其加载的数据较多,不好区分,不知道其是哪个是需要抓取的数据,所以就需抓取指定浏览器的数据,这样就能很清晰知道数据的来源. 步骤一: 打开fiddler4,再打开浏 ...

  5. fiddler抓取火狐浏览器上https协议请求

    前言:现在很多网站采用https协议,当打开fiddler时.浏览https协议的网站会提示不安全,若使用fiddler抓取https协议的请求,则需要向浏览器导入证书,才能抓取https协议的请求, ...

  6. 【浏览器直播源抓取】浏览器抓取真实直播源地址(2022/11/16)

    距离上次抓取直播源已经过去一年了,最近发现官方已更新了,以前的方法并不适用了,于是再来一波解析,小伙伴们准备好发车了吗? 一.版本回顾 之前直播源解析是从H5版本入手,直接从H5页面拿到全局变量liv ...

  7. php 原生抓取关键词,php获取从百度、谷歌等搜索引擎进入网站关键词的方法

    本文实例讲述了php获取从百度.谷歌等搜索引擎进入网站关键词的方法.分享给大家供大家参考.具体实现方法如下: function search_word_from() { $referer = isse ...

  8. http下载异常_百度网站抓取异常的原因有哪些?有什么影响和解决方法?

    大纲如下:1.抓取异常是什么?百度抓取异常又是什么?2.百度抓取异常的原因有哪些?3.网站抓取异常的原因有哪些?4.百度抓取异常对网站有什么影响?5.网站出现抓取异常的解决方法抓取异常是什么?百度抓取 ...

  9. python爬取百度搜索_Python-Scrapy抓取百度数据并分析

    抓取智联招聘和百度搜索的数据并进行分析,使用visual studio编写代码mongodb和SQLServer存储数据.使用scrapy框架结合 selenium爬取百度搜索数据,并进行简要的数据的 ...

最新文章

  1. linux 禁用 ctrl+alt+del 重启系统
  2. java oracle database user dsn_跨会话序列化数据库连接
  3. 信息学奥赛一本通 1265:【例9.9】最长公共子序列
  4. cocos2dx打飞机项目笔记二:BulletLayer类
  5. LeetCode-39. 组合总和 I
  6. keras中文文档_Keras分词器Tokenizer
  7. android view绘制速度,关于android ui的优化 view 的绘制速度
  8. scrapy框架持久化存储
  9. 5G布控球星光级400万高清布控球智能布控球
  10. 论文阅读 视频生成(vid2vid) || Few-shot Video-to-Video Synthesis
  11. java启动临时文件_springboot临时文件存储目录配置
  12. python seo cms_「SEO帝国」 SEO中讲的 CMS是什么意思
  13. 利用python修改Excel内容
  14. 漫话最短路径(二)--bellman-Ford(贝尔曼-福特)算法
  15. 明年打算考会计证 -柯桥有没有推荐的地方-泓畅
  16. Flyway学习和使用
  17. 大数据学习之——Zookeeper安装
  18. 西电大四毕业生的一些胡言乱语
  19. 谷歌浏览器——删不掉的cookie!
  20. 如何构建用户画像系统?看这一篇就够了!

热门文章

  1. 给不会调用C++STL库中二分函数lower_bound,upper_bound,binary_search同学的一些话!
  2. 【51Nod - 1270】数组的最大代价(dp,思维)
  3. c/c++,字符,字符串,各种方式读入与对空格,回车的处理
  4. 机器学习笔记:Overview
  5. oracle开放视图,Oracle视图
  6. 向量合并 matlab,MATLAB追加向量
  7. mysql 性能问题_mysql性能问题
  8. android6.0 sd卡卸载api,android6.0 用户关掉sd卡读取权限的情况下, 还能做到手机缓存么?...
  9. jays+android耳机,android – 响应多按钮有线耳机
  10. 28和lba48命令格式区别_编译Sass(命令行)