分享95个ASP整站程序源码,总有一款适合您

95个ASP整站程序源码下载链接:https://pan.baidu.com/s/1wAtkDSQxg4gSgo7Y9DiJKA?pwd=lnnt 
提取码:lnnt

Python采集代码下载链接:采集代码.zip - 蓝奏云

我的博客地址:亚丁号-知识付费平台 支付后可见 扫码付费可见

import os
import shutilimport requests
from bs4 import BeautifulSoupfrom framework.base.BaseFrame import BaseFrame
from sprider.access.SpriderAccess import SpriderAccess
from sprider.plugin.SpriderTools import SpriderTools
from sprider.plugin.UserAgent import UserAgentclass CNSourceCoder:base_url = "http://www.downcode.com"max_pager = 10  # 每页的数量 影响再次采集的起始位置.word_image_count = 5  # word插入图片数量 同时也是明细采集图片和描述的数量page_end_number = 0word_content_list = []haved_sprider_count = 0  # 已经采集的数量sprider_detail_index = 0  # 明细方法采集的数量 累加

IT信息网站程序

无忧传奇站点程序(绿色天堂版)

安琪儿技术中心系统

中文网赚程序 专业版

杭州二手信息网

幕豪设计网管理系统V1.00版本

动力借贷中介系统V2.0

D.W.L网站程序V1.0测试版

跳蚤市场Access版

多风格购物系统

新思维旅游网站管理系统

牛妈妈个人主页 V2.0.1

天晴系统 V1.0(高贝系统3.0破解版)

Ax简单全站系统

新环宇灯饰网

咪咪娱乐社区全功能整站程序

阿布网站内容管理系统

自由领域WEB+WAP同学录4.3版

沧海风云娱乐网 V2.0

冀北建材网

MV520企业管理系统 V4.0

韩枫企业网站管理系统 V3.0

6D设计·动易版

游戏装备交易系统高速下载

520吃网

温州瑞迪电气有限公司网站

泸州生活信息港V4.6

百顺医药资讯网

炫乐吧美女图库红色激情AC版(带采集生成Html)

炫乐吧美女图库红色激情AC(动易2006sp3全功能)版

炫乐吧美女图库红色激情SQL版(带采集生成Html)

横县信息港2006全功能版

『KO』手机信息网

ZONELOVENET_QY中小企业网站管理系统 免费版

亿田工作室全站程序 YT 1.00版

860763分类信息网

闽宁支教网整站程序

新云内核的外挂下载联盟

便民信息查询系统

昆明人企业网站管理系统[终极完美双语版]3.0下载

回忆社区全功能美化版整站程序

7dso超级搜索整站程序

网乐56down程序V1.0版本

流星设计企业网站管理系统V3.0[超强美工版]

BqBlog V1.0

千纸鹤网络整站程序

沭阳信息港(美化版)1.0

依诺雅全站蓝色橙誓修正版

高贝系统 V2.0.3 解密版

驻马店二手车信息发布系统 V3.1

CN可爱吧 整站程序 V2.0

武汉二手市场网整站

中国GGMM·门户基地

快乐游戏代练网(专用版2006)

杭州力程电子有限公司网站管理系统(个人版靠中间设计) V3.0.Rar

杭州力程电子有限公司网站管理系统(个人版靠左边设计)V3.0

新派购物系统

在线大头贴程序

就想游设计V4.0整站

蓝宇网络社区2006 1.0版

Terminal个人网站管理系统 V2.0

蓝雨设计HTML版 V2.0

白城天空综合娱网

深度学习论坛 V0.05

中国亲情网源码

新云网站管理系统V2.1(Xv21.Com修改风格版) V2.1 Build 0707

浙江医疗美容网网站统计

一个婚庆礼仪网

叶子树(Webshu.Net)06清新绿色风格整站下载!

北京二手分类信息网

60度 Eadren 网络V2006 DIV+CSS卡通版

PP贝宝淘金

简单漂亮的企业网站 V1.0

衢州电脑网2006SP1模版2006

八脚娱乐网

山西二手网免费无错

装饰装潢(地板木业材料)公司企业网站管理

65353资源在线2.0(无功能限制版本)

南通时代网络科技

DIV+CSS的电影程序

招商网源码无错版

通盈企业整站程序

Show5秀我网 调试版

93度在线影视吧(带数据)

平民创业网美化无错版

笑天网站管理系统Ver3.3免费版(ShotanCMS_Ver3.3_Free)

游戏代练进度查询程序

番禺人才网

简单生活——普通个人夏季版

铜陵县职业和成人教育中心SQL SERVER版

企网互联网站管理系统

60度 Eadren 会员控制页面模板

Web590网上书店系统

小天设计1.0

星蒴网站管理系统 V1.0

def sprider(self,sprider_name,sprider_count,start_number,pager_number,sprider_type,is_show_browse,root_path,first_column_name,second_column_name,is_record_db):"""http://www.downcode.com/sort/j_1_2_1.shtml:param sprider_name::return:"""self.first_folder_name=sprider_type.upper()self.base_path=root_pathself.first_column_name = first_column_nameself.second_column_name = second_column_nameself.sprider_start_count=start_numberself.is_record_db=is_record_dbBaseFrame().debug("开始采集[源码下载站]" + self.first_folder_name + "源码...")BaseFrame().right("本次采集参数:sprider_count(采集数量):" + str(sprider_count) + "")BaseFrame().right("本次采集参数:sprider_name(采集名称):" + sprider_name + "")sprider_url = self.base_url + "/{0}/{1}_1.shtml".format(self.first_column_name, self.second_column_name)# 根据栏目构建URLBaseFrame().debug("本次采集参数:sprider_url:" + sprider_url)self.second_folder_name = str(sprider_count) + "个" + sprider_name  # 二级目录也是wordTitleself.merchant = int(self.sprider_start_count) // int(self.max_pager) + 1  # 起始页码用于效率采集self.file_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_nameBaseFrame().right("本次采集参数:file_path=" + self.file_path + "")# 浏览器的下载路径self.down_path = self.base_path + os.sep + self.first_folder_name+ os.sep + self.second_folder_name+ "\\Temp\\"BaseFrame().right("本次采集参数:down_path=" + self.down_path + "")# First/PPT/88个动态PPT模板/动态PPT模板self.save_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_name + os.sep + sprider_nameBaseFrame().right("本次采集参数:save_path=" + self.save_path + "")if os.path.exists(self.down_path) is True:shutil.rmtree(self.down_path)if os.path.exists(self.down_path) is False:os.makedirs(self.down_path)if os.path.exists(self.save_path) is True:shutil.rmtree(self.save_path)if os.path.exists(self.save_path) is False:os.makedirs(self.save_path)response = requests.get(sprider_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))response.encoding = 'gb2312'soup = BeautifulSoup(response.text, "html5lib")#print(soup)element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})page_end_number = 1page_end_url = ""page_end_title = soup.find("a", attrs={"title": '最后页'})page_end_url = page_end_title.get("href")if page_end_url is None or page_end_url == "":page_end_number = 1else:page_end_number = (page_end_url.split(".shtml")[0].split("_")[3])self.page_count = self.merchantwhile self.page_count <= int(page_end_number):  # 翻完停止try:if self.page_count == 1:self.sprider_detail(element_list, page_end_number,sprider_count)passelse:if int(self.haved_sprider_count) == int(sprider_count):BaseFrame().debug("sprider采集到达数量采集停止...")BaseFrame().debug("开始写文章...")SpriderTools.builder_word(self.second_folder_name,self.word_content_list,self.file_path,self.word_image_count,self.first_folder_name)SpriderTools.copy_file(self.word_content_list,self.save_path,self.second_folder_name,self.file_path)SpriderTools.gen_passandtxt(self.second_folder_name, self.word_content_list, self.file_path)BaseFrame().debug("文件编写完毕,请到对应的磁盘查看word文件和下载文件!")breaknext_url = self.base_url + "/{0}/{1}_{2}.shtml".format(self.first_column_name,self.second_column_name,self.page_count)response = requests.get(next_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))response.encoding = 'gb2312'soup = BeautifulSoup(response.text, "html5lib")element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})self.sprider_detail(element_list, page_end_number,sprider_count)passself.page_count = self.page_count + 1  # 页码增加1except Exception as e:BaseFrame().error("sprider()执行过程出现错误:" + str(e))

最后送大家一首诗:

山高路远坑深,
大军纵横驰奔,
谁敢横刀立马?
惟有点赞加关注大军。

分享95个ASP整站程序源码,总有一款适合您相关推荐

  1. 分享123个ASP整站程序源码,总有一款适合您

    分享123个ASP整站程序源码,总有一款适合您 123个ASP整站程序源码下载链接:https://pan.baidu.com/s/1GzhuIHhkNVSLz1plTyQWCg?pwd=auha  ...

  2. 分享74个ASP整站程序源码,总有一款适合您

    分享74个ASP整站程序源码,总有一款适合您 74个ASP整站程序源码下载链接:https://pan.baidu.com/s/12WvL3Z7LhmCwzhTPgxVZTA  提取码:g64j Py ...

  3. 分享119个ASP整站程序源码,总有一款适合您

    分享119个ASP整站程序源码,总有一款适合您 119个ASP整站程序源码下载链接:https://pan.baidu.com/s/17KlFihL6Ljkhmg3aJHftlw?pwd=ox4l  ...

  4. 分享99个ASP整站程序源码,总有一款适合您

    分享99个ASP整站程序源码,总有一款适合您 99个ASP整站程序源码下载链接:https://pan.baidu.com/s/1ivSFrhPAAxZifZ7ym6gHkw?pwd=v1sc  提取 ...

  5. 分享60个ASP整站程序源码,总有一款适合您

    分享60个ASP整站程序源码,总有一款适合您 60个ASP整站程序源码下载链接:https://pan.baidu.com/s/1AjGM4AsHOgpWnajcXeiBFQ  提取码:e3b8 Py ...

  6. 分享105个ASP整站程序源码,总有一款适合您

    分享105个ASP整站程序源码,总有一款适合您 105个ASP整站程序源码下载链接:https://pan.baidu.com/s/148X7V8o435Scu0lUgWMwFQ?pwd=8mwj  ...

  7. 分享138个ASP整站程序源码,总有一款适合您

    分享138个ASP整站程序源码,总有一款适合您 138个ASP整站程序源码下载链接:https://pan.baidu.com/s/1ruGhin8yHdhxQrc5Eriv4w?pwd=e2gb  ...

  8. 分享61个ASP整站程序源码,总有一款适合您

    分享61个ASP整站程序源码,总有一款适合您 61个ASP整站程序源码下载链接:https://pan.baidu.com/s/1ksA5pV3XN_kDX8VcmnGObQ?pwd=t8om  提取 ...

  9. 分享88个ASP整站程序源码,总有一款适合您

    分享88个ASP整站程序源码,总有一款适合您 88个ASP整站程序源码下载链接:https://pan.baidu.com/s/1oB-OwcZ7wwD-T7psHzlHyw?pwd=zfvx  提取 ...

最新文章

  1. 二十一. Python基础(21)--Python基础(21)
  2. Opencv Kmeans聚类算法
  3. MySQL 高级 - 存储过程 - 概述
  4. 基于 EntityFramework 生成 Repository 模式代码
  5. 【渝粤题库】陕西师范大学200781 数据库原理及应用 作业
  6. 1157 全是1的最大子矩阵
  7. 纪念一下我这尴尬中二的排名吧
  8. 学校计算机的使用作文,电脑课上作文(3篇)
  9. CSS3+HTML5特效5 - 震动的文字
  10. oppo包名_常用APP(apk)对应包名总结(持续更新...)
  11. java支付系统,三方支付系统,四方支付系统
  12. 数据时代的来临,大数据价值主要体现在哪几个方面?
  13. 服务器 端口映射 dmz,如何使用端口映射功能与 DMZ 主机设置
  14. Interview:算法岗位面试—BAT公司问题面试之计算机基础(进程与线程的区别)、经典概率问题等集锦
  15. 拉网小调(民歌介绍)
  16. Python多进程4 进程池——Pool
  17. 计算机更新配置卡住了,Windows系统更新时电脑卡住或崩溃怎么办-万兴恢复专家...
  18. C ——进程内存(内存管理、内存分配(brk,sbrk、mmap、munmap)、内存常见错误)
  19. 计算机网络网卡是什么东西,网卡坏了有什么现象?判断电脑网卡坏的方法
  20. 好文分享:Google的潘多拉星球

热门文章

  1. Docker学习——docker高级
  2. java转动的风扇课程设计_java风扇功能设计
  3. C3P0连接池和Druid连接池
  4. 《HelloGitHub》第 85 期
  5. 【c/c++】Old Bill
  6. 直方图规定化原理及matlab实现代码
  7. win8/win10 安装ubuntu16/ubuntu18 双系统(成功案例win8.1+ubuntu16,win10+ubuntu18)
  8. 学生时代做的一个非常低级的卡拉OK播放器
  9. 深入浅出理解kNN(k近邻算法)
  10. linux(二)—cut,tee,paste,tr工具的用法和案例