Docker码头工人之将爬虫放入docker运行

Docker安装：$curl -sSLhttp://acs-public-mirror.oss-cn-hangzhou.aliyuncs.com/docker-engine/internet |sh -

$sudo mkdir -p /etc/docker

$sudo tee /etc/docker/daemon.json <<-'EOF'

{

"registry-mirrors":["https://wghlmi3i.mirror.aliyuncs.com"]

}

EOF

$sudo systemctl daemon-reload

$sudo systemctl restart docker

Docker images看可用的镜像

Docker定义：是一个开源的应用容器引擎，Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。

用dockerfile创建一个初始镜像

FROM ubuntu:16.04
RUN apt-get update
RUN apt-get -y dist-upgrade
RUN apt-get install -y openssh-server
RUN apt-get install -y python3-dev python3-pip
RUN apt-get install -y zlib1g-dev libffi-dev libssl-dev
RUN apt-get install -y libxml2-dev libxslt1-dev
RUN pip3 install setuptools
RUN pip3 install Scrapy

docker build -f dockerfile -t scrapy_image.

docker images

使用镜像运行虚拟机

docker run -it -v/home/python/PycharmProjects/baidutieba:/program scrapy_image /bin/bash

安装需要的软件，放入爬虫源码

关闭虚拟机，用commit 保存虚拟机的状态

docker save scrapy_image | bzip2 -9-c>sc.tar.bz2

bzip2 -d -c <sc.tar.bz2 | docker load

docker ps -a

docker commit 1526174a1c71 hzy/sc

用run 使用新镜像建立虚拟机

docker run -it -v/home:/program hzy/sc /bin/bash

home与program目录互通

列出所有创建的容器ID。：

docker ps -a -q

删除容器

docker rm xxx

Docker码头工人之将爬虫放入docker运行相关推荐

C语言如果实现电脑与plc通讯,PLC怎么连接电脑？怎么把在电脑编程好的程序放入PLC运行？...
PLC怎么连接电脑,首先需要一根编程电缆线连接PLC和我们的电脑,连接线的种类不同所需要安装的驱动就不一样,安装驱动有时候会在安装编程软件的时候询问是否安装相对应的驱动,如果选择否,则需要在后期手动进 ...
linux后台运行快捷键,Linux命令放入后台运行方法（和Ctrl+Z）详解版
Linux 命令放入后台的方法有两种,分别介绍如下. "命令 &",把命令放入后台执行第一种把命令放入后台的方法是在命令后面加入空格 &.使用这种方法放入后台的 ...
如何不重启服务，把编译类放入正在运行的服务中去
1显示指定要替换的类列表:jar tvf paycenter-bank.jar |grep CmbcDebitFastPayImpl 2解压这个类:jar xvf paycenter-bank.jar ...
安卓9 怎么运行老程序_PLC怎么连接电脑？怎么把在电脑编程好的程序放入PLC运行？...
点击上方蓝字关注, 回复数字"100"领取电工经典电路图100例今天给大家介绍三菱FX系列PLC如何接线和如何通过RS232进行下载程序,简单的说明帮助大家能快速与PLC通讯,并 ...
idea 导出war包,IDEA导出Web项目war包并放入Tomcat运行起来
### 目录 ### * * * 1.打开Web项目的项目结构 * 2.找到构件然后添加一个新的构件 * 3.添加完成后如图所示,留意下输出目录 * 4.之后关闭项目结构选择构建-编译Artifact ...
docker数据卷容器卷_如何删除Docker映像，容器和卷
docker数据卷容器卷 Docker备忘单 (A Docker Cheat Sheet) 介绍 (Introduction) Docker makes it easy to wrap your ap ...
沙盘：把危险程序放进沙盘运行，倒沙后无任何痕迹！
沙盘:把危险程序放进沙盘运行 ,倒沙后无任何痕迹! 传统的杀毒软件依靠病毒库查杀,但病毒的更新永远是先于杀软,致使新病毒很难在第一时间被发现,众多同学装了360不用外挂账号依旧遭殃,这就是原因所在.( ...
【Java 并发编程】线程池机制 ( 线程池执行任务细节分析 | 线程池执行 execute 源码分析 | 先创建核心线程 | 再放入阻塞队列 | 最后创建非核心线程 )
文章目录一.线程池执行任务细节分析二.线程池执行 execute 源码分析一.线程池执行任务细节分析线程池执行细节分析 : 核心线程数 101010 , 最大小成熟 202020 , 非核心线 ...
springboot添加webmagic_SpringBoot+Solr + webmagic JD商品爬取数据，放入solr中做搜索
简介 SpringBoot + solr + webmagic 学习solr写的demo 1 概述根据https://github.com/ameizi/solrj-example 改的,原项目是S ...
Python数据分析：异常值检验的两种方法 -- Z 分数上下分位点（放入自写库，一行代码快速实现）
本文已在公众号 " 数据分析与商业实践 " 首发.关注一下~,更多商业数据分析案例源码等你来撩.后台回复 "异常值" ,即可获取本文的案例示范与包含详细注释的源 ...

Docker码头工人之将爬虫放入docker运行

Docker码头工人之将爬虫放入docker运行相关推荐

最新文章

热门文章