python简单爬虫代码-一则python3的简单爬虫代码

不得不说python的上手非常简单。在网上找了一下，大都是python2的帖子，于是随手写了个python3的。代码非常简单就不解释了，直接贴代码。

代码如下:

#test rdp

import urllib.request

import re

#登录用的帐户信息

data={}

data['fromUrl']=''

data['fromUrlTemp']=''

data['loginId']='12345'

data['password']='12345'

user_agent='Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'

#登录地址

#url='http://192.168.1.111:8080/loginCheck'

postdata = urllib.parse.urlencode(data)

postdata = postdata.encode('utf-8')

headers = { 'User-Agent' : user_agent }

#登录

res = urllib.request.urlopen(url,postdata)

#取得页面html

strResult=(res.read().decode('utf-8'))

#用正则表达式取出所有A标签

p = re.compile(r'(.*?)')

for m in p.finditer(strResult):

print (m.group(1))#group(1)是href里面的内容，group(2)是a标签里的文字

关于cookie、异常等处理看了一下，没有花时间去处理，毕竟只是想通过写爬虫来学习python。

本条技术文章来源于互联网，如果无意侵犯您的权益请点击此处反馈版权投诉

本文系统来源：php中文网

python简单爬虫代码-一则python3的简单爬虫代码相关推荐

爬虫python代码-一则python3的简单爬虫代码
不得不说python的上手非常简单.在网上找了一下,大都是python2的帖子,于是随手写了个python3的.代码非常简单就不解释了,直接贴代码. 代码如下: #test rdp import ur ...
python还款程序_使用Python3 编写简单信用卡管理程序
1.程序执行代码: #Author by Andy #_*_ coding:utf-8 _*_ import os,sys,time Base_dir=os.path.dirname(os.path. ...
python简单爬虫代码-使用Python3.5写简单网络爬虫
<一>用urllib库访问URL并采集网络数据 -1. 直接采集发送请求,打开URL,打印传回的数据(html文件) - 2. 模拟真实浏览器访问 1)发送http头信息(header) ...
python爬虫实例-python3.7简单的爬虫实例详解
python3.7简单的爬虫,具体代码如下所示: #https://www.runoob.com/w3cnote/python-spider-intro.html #Python 爬虫介绍 impor ...
python urllib.request 爬虫数据处理-使用Python3.5写简单网络爬虫
<一>用urllib库访问URL并采集网络数据 -1. 直接采集发送请求,打开URL,打印传回的数据(html文件) - 2. 模拟真实浏览器访问 1)发送http头信息(header) ...
python3爬虫实例-python3.7简单的爬虫实例详解
python3.7简单的爬虫,具体代码如下所示: #https://www.runoob.com/w3cnote/python-spider-intro.html #Python 爬虫介绍 impor ...
python 系列 03 - 基于scrapy框架的简单爬虫
文章目录 1. scrapy介绍 2 新建爬虫项目 3 新建蜘蛛文件 4 运行爬虫 5 爬取内容 5.1分析网页结构 5.2 关于Xpath解析 5.3 接着解析电影数据 5.4 下载缩略图 5.5 ...
Python学习教程（Python学习路线）：Python3之递归函数简单示例
Python学习教程(Python学习路线):Python3之递归函数简单示例概述递归函数即直接或间接调用自身的函数,且递归过程中必须有一个明确的递归结束条件,称为递归出口.递归极其强大一点就是能 ...
python在线翻译代码_Python 20行简单实现有道在线翻译的详解
简介主要是尝试简单的使用pyhton的爬虫功能,于是使用有道进行尝试,并没有进行深入的诸如相关api的调用. 以下是需要的POST数据代码以下是相关部分的代码: import urllib.re ...

python简单爬虫代码-一则python3的简单爬虫代码

python简单爬虫代码-一则python3的简单爬虫代码相关推荐

最新文章

热门文章