python语言的主网址-python如何获得一个url地址对应的跳转后的最终网址

问题

在python中，如何获取短链对应最终网址，现在有很多淘宝短链，我需要获取短链跳到的最终网址，这个有什么好办法吗？有的是302 有的是直接在网页用js进行跳转，，这些如何获取

解决方案

用selenium+phantonjs...

#!/usr/bin/python2.7

from twisted.internet import reactor

from twisted.internet.defer import Deferred, DeferredList, DeferredLock

from twisted.internet.defer import inlineCallbacks

from twisted.web.client import Agent, HTTPConnectionPool

from twisted.web.http_headers import Headers

from pprint import pprint

from collections import defaultdict

from urlparse import urlparse

from random import randrange

import fileinput

pool = HTTPConnectionPool(reactor)

pool.maxPersistentPerHost = 16

agent = Agent(reactor, pool)

locks = defaultdict(DeferredLock)

locations = {}

def getLock(url, simultaneous = 1):

return locks[urlparse(url).netloc, randrange(simultaneous)]

@inlineCallbacks

def getMapping(url):

# Limit ourselves to 4 simultaneous connections per host

# Tweak this as desired, but make sure that it no larger than

# pool.maxPersistentPerHost

lock = getLock(url,4)

yield lock.acquire()

try:

resp = yield agent.request('HEAD', url)

locations[url] = resp.headers.getRawHeaders('location',[None])[0]

except Exception as e:

locations[url] = str(e)

finally:

lock.release()

而且可以试试pip包

from urlunshort import resolve

resolve("http://bit.ly/qlKaI") 结果 'http://bitbucket.org/runeh/urlunshort/'

扫一扫关注IT屋

微信公众号搜索 " IT屋 ” ，选择关注与百万开发者在一起

python语言的主网址-python如何获得一个url地址对应的跳转后的最终网址相关推荐

python语言的主网址-python官方网站
广告关闭腾讯云双11爆品提前享,精选热门产品助力上云,云服务器首年88元起,买的越多返的越多,最高满返5000元! 由于整个python语言从规范到解释器都是开源的,所以理论上,只要水平够高,任何人 ...
python语言的主网站网址-python官方网站
广告关闭腾讯云双11爆品提前享,精选热门产品助力上云,云服务器首年88元起,买的越多返的越多,最高满返5000元! 由于整个python语言从规范到解释器都是开源的,所以理论上,只要水平够高,任何人 ...
python语言程序设计嵩天-Python语言程序设计基础(第2版)嵩天课后答案
嵩天.礼欣.黄天羽Python语言程序设计基础(第2版)习题答案本书提出了以理解和运用计算生态为目标的Python语言教学思想,在系统讲解Python语言语法的同时介绍了从数据理解到图像处理的14个P ...
如何自学python语言-我是如何学习Python语言？
我喜欢学习新的东西,包括工具,算法,技巧等.一来是帮助我更好地解决问题,二来学习的进程令我愉悦. 我是一位数据工作者,经常会使用到各种软件和工具帮助我解决各种数据问题,比方说数据的抽取与解析,数据的加 ...
Python语言学习：在python中，如何获取变量的本身字符串名字而非其值/内容及其应用(在代码中如何查找同值的所有变量名)
Python语言学习:在python中,如何获取变量的本身字符串名字而非其值/内容及其应用(在代码中如何查找同值的所有变量名) 目录
Python语言学习：利用python获取当前/上级/上上级目录路径(获取路径下的最后叶目录的文件名、合并两个不同路径下图片文件名等目录/路径案例、正确加载图片路径)之详细攻略
Python语言学习:利用python获取当前/上级/上上级目录路径(获取路径下的最后叶目录的文件名.合并两个不同路径下图片文件名等目录/路径案例.正确加载图片路径)之详细攻略目录利用python ...
Python语言学习：利用python语言实现调用内部命令(python调用Shell脚本)—命令提示符cmd的几种方法
Python语言学习:利用python语言实现调用内部命令(python调用Shell脚本)-命令提示符cmd的几种方法目录利用python语言实现调用内部命令-命令提示符cmd的几种方法 T1. ...
Python语言学习：基于python五种方法实现使用某函数名【func_01】的字符串格式('func_01')来调用该函数【func_01】执行功能
Python语言学习:基于python五种方法实现使用某函数名[func_01]的字符串格式('func_01')来调用该函数[func_01]执行功能目录问题提出代码五种设计思路 T1方法:e ...
Python语言学习：解决python版本升级问题集合(python2系列→Python3系列)导致错误的总结集合
Python语言学习:解决python版本升级问题集合(python2系列→Python3系列)导致错误的总结集合目录 Python版本升级的原因 Text and binary data in P ...

python语言的主网址-python如何获得一个url地址对应的跳转后的最终网址

python语言的主网址-python如何获得一个url地址对应的跳转后的最终网址相关推荐

最新文章

热门文章