360、搜狗搜索内容200重定向真实链接获取
参考:https://www.52pojie.cn/thread-769952-1-1.html
注意:360快照必须带上refer请求才能正常打开看
搜狗正常快照链接可以直接打开
解决方式:
1、可以直接快照中得到
=============================下面是我用正则从快照中拿到的真实链接==================================http://snapshot.sogoucdn.com/websnapshot?ie=utf8&url=http%3A%2F%2Fwww.51hei.com%2Fmcu%2F4342.html&did=faab698d886364e8-2d63d16c82f515a2-a9709b9de8ee16fa3a8d1afebbe07555&k=ad067682fe8f51dd446e49ed6e911ca4&encodedQuery=ascii%E7%A0%81%E5%AF%B9%E7%85%A7%E8%A1%A8&query=ascii%E7%A0%81%E5%AF%B9%E7%85%A7%E8%A1%A8&&p=40040108&dp=1&cid=&w=01020400&m=0&st=0======搜狗re解码=====
#获取URL所在位置
selective_kz=re.findall('url=(http.*?htm[a-z]?)',url)
#解码成正确的URL
re.sub('%3A',':',(re.sub('%2F',"/",selective_kz[0])))========================上面是搜狗,下面是360=======(快照)=================http://c.360webcache.com/c?m=dc140fe3b217aa80ed232d5fed293a16&q=%E5%86%92%E9%99%A9%E7%8E%8B&u=http%3A%2F%2Fwww.7k7k.com%2Fflash%2F98413.htm======360re解码=====
#获取URL所在位置
selective_kz=re.findall('u=(http.*?htm[a-z]?)',url)
#解码成正确的URL
re.sub('%3A',':',(re.sub('%2F',"/",selective_kz[0])))
2、直接请求链接text里得到
In [17]: response=requests.get("http://www.so.com/link?m=aExMT69UVjlZUNIsickSvIdbGS7fbK4rmHk9cBpRqOTQWcJJthjqmIhM816MSX...: VXQ%2FaIlWCK5alPOFErPrMnNi%2FnoxVkBw8b%2BsYEXQEAFzoBLC2vRTUzYk9uP7aWdgBshdyXG0Y%2BHNl5g2Xgn3rPaJJtA2YITsBj78rV...: EWFoljhBZEImAue3SlA%3D%3D")In [18]: response.status_code
Out[18]: 200In [19]: response.text
Out[19]: ' <meta content="always" name="referrer">\n <script>window.location.replace("http://su.ganji.com/fuwu_dian/2551035025x/guoneiwuliu/")</script>\n <noscript>\n <meta http-equiv="refresh" content="0;URL=\'http://su.ganji.com/fuwu_dian/2551035025x/guoneiwuliu/\'">\n </noscript>\n \n'
360、搜狗搜索内容200重定向真实链接获取相关推荐
- 友盟cnzz统计数据为什么统计不到百度360搜狗搜索过来的关键词?
网站上同时安装了百度统计和友盟的cnzz统计,通过数据分析发现,两者有很大区别,而且在cnzz搜索词那一项,和百度统计的出入很大. 记得几年前,cnzz是可以详细统计到各大搜索引擎的数据的,那么现在c ...
- 自动打开搜狗搜索的前五个链接
#! python3 # lucky.py - Opens several sogou search results. """ Created on Sat Feb 24 ...
- 04. requests模块入门与三个案例(搜狗搜索/百度翻译/豆瓣电影)
目录 前言 requests的安装 1. cmd中输入安装 2. PyCharm中运行安装 3. Anaconda虚拟环境中安装 4. 检查是否安装成功 案例1. 抓取搜狗搜索内容 案例2 利用百度翻 ...
- HttpURLConnection获取百度搜狗360搜索链接重定向真实目标链接地址url
本人原创测试了百度,搜狗,360搜索都可以获取重定向后的真实地址,直接运行就可以,也可以根据自己项目具体修改功能.java使用HttpURLConnection获取百度搜狗360搜索链接重定向真实目标 ...
- [图文讲解]强大的谷歌搜索技巧,百度360搜狗什么的就是渣渣
首先推荐篇关于谷歌搜索的大体文章给大家看看,望大家对谷歌搜索有个初步的印象和了解 谷歌免翻墙地址: 请戳我吧,我是传送门 善用GOOGLE -- 從入門到精通 (DOC 簡體字版由網站下載,原作者 ...
- Python与seo工具脚本,360/搜狗相关搜索词采集源码参考
搜索引擎相关搜索词应该是不少seoer在寻找和选择使用的关键词拓展类别,除开热门的百度相关搜索词采集,当然还有360搜索引擎以及搜狗搜索引擎,当然知道方法以后,应用python来实现,基本都是大同小异 ...
- 如何用python爬取公众号文章搜狗微信搜索_python如何爬取搜狗微信公众号文章永久链接的思路解析...
这篇文章主要介绍了python如何爬取搜狗微信公众号文章永久链接的思路解析 ,小编觉得挺不错的,现在分享给大家,也给大家做个参考.一起跟随小编过来看看吧. 本文主要讲解思路,代码部分请自行解决搜狗微信 ...
- 搜索引擎百度/360/搜狗关键词搜索提交信息
关键词搜索,主要是关键词接口的确定,网上已有大佬为我们搞明白了.我就截图一下 先来代码,再解释 import requestskeyword="Python" kv1 = {'Us ...
- 搜狗搜索:与网站权重相关的8个知识点
猫宁!!! 参考链接:http://help.sogou.com/guide.html?v=1 虽然是与搜狗搜索相关的,但是在搜索引擎间可是通用的,而且总结的比较到位与全面. 第一.网站设计指南 每个 ...
最新文章
- Android CheckedTextView 实现单选与多选
- Windows Server 2016-图形化备份域控制器
- 预备作业02 20162320刘先润
- [jQuery]点击某元素之外触发事件
- 【安全漏洞】挖洞小记
- VScode配置java开发环境
- 广义表的长度和深度怎么算_最新详细个人所得税税率表!快看最新个人所得税怎么算!...
- 宿命传说2之女神召唤java_【更新公告】新SSR装备召唤概率限时UP!梅林领悟了全新助战技!...
- JAVA计算机毕业设计在线购书商城系统Mybatis+源码+数据库+lw文档+系统+调试部署
- 代码安全审计工具推荐
- Android 根据手机自带GPS获取当前位置,经纬度
- vue中使用kindeditor编辑器_vue集成kindeditor富文本
- 汽车软件测试都测试,汽车零部件如何做测试?
- 军哥独家QCIE(囊括CCIE和HCIEv3.0)的全新课程。请大家参阅
- Cisco(GNS3) - 路由器接口类型
- LINUX中DNS服务器反向解析
- des加密解密 代码 java_java 实现DES 加密解密的示例
- 【IDEA用法】IDEA新建文件自动加入SVN,删除文件自动从SVN中删除
- rust申请解封_希望rust真的解封
- 谷歌自动翻译-谷歌翻译api怎样能打开网页默认自动翻译