jupyternotebook运行python_jupyter notebook参数化运行python方式

Updates

（2019.8.14 19:53）吃饭前用这个方法实战了一下，吃完回来一看好像不太行：跑完一组参数之后，到跑下一组参数时好像没有释放之占用的 GPU，于是 notebook 上的结果，后面好几条都报错说 cuda out of memory。

现在改成：将 notebook 中的代码写在一个 python 文件中，然后用命令行运行这个文件，比如：

# autorun.py

import os

# print(os.getcwd())

over = [ # 之前手工改参数跑完的参数组合

[0, 1, 1], [0, 1, 2], [0, 1, 3],

[0, 2, 1],

[1, 0, 1],

[1, 2, 1]

]

for alpha in range(1, 4, 1):

for beta in range(3):

for gamma in range(3):

if [alpha, beta, gamma] in over:

continue

os.system(f'python main.py --alpha {alpha} --beta {beta} --gamma {gamma}')

这里的 main.py 是训练用的主文件。改在 py 里用 os.system 跑，希望跑一组参数之后完会自动释放资源再跑下一组（?）

Notes

有多组参数组合需要尝试，不想每组参数都人工修改 python 代码，再在 notebook 中 %run 它。

python 参数通过的 argparse 接收，在 notebook 中写个多重循环遍历参数组合传给 python 程序自动运行。

记录一个简例。

Codes

test_dir

|- test.py

|- test.ipynb

in py file

# test.py

import argparse

parser = argparse.ArgumentParser()

parser.add_argument('--number', type=int, default=0, help='number')

parser.add_argument('--string', type=str, default='abc', help='string')

args = parser.parse_args()

print('number:', args.number, type(args.number))

print('string:', args.string, type(args.string))

in notebook

注意传参数时 $ 的使用

# test.ipynb

for i in range(3):

for s in ('a', 'b', 'c'):

%run test.py --number $i --string $s

补充知识：Jupyter Notebook出现kernel error FileNotFoundError: [WinError 2] 系统找不到指定的文件

Jupyter Notebook出现kernel error

conda create -n py36 --clone root

当时用Anaconda克隆本地的环境root到自己创建的py36环境，由于克隆完成后我又更改了虚拟环境名称，所以导致启动

jupyter notebook 进入文件是不能找到连接文件。

File”//anaconda/lib/python2.7/site-packages/jupyter_client/manager.py”, line 190, in _launch_kernel

return launch_kernel(kernel_cmd, **kw)

File “//anaconda/lib/python2.7/site-packages/jupyter_client/launcher.py”, line 123, in launch_kernel

proc = Popen(cmd, **kwargs)

File “//anaconda/lib/python2.7/subprocess.py”, line 710, in init

errread, errwrite)

File “//anaconda/lib/python2.7/subprocess.py”, line 1335, in _execute_child

raise child_exception

OSError: [Errno 2] No such file or director

解决办法

首先在cmd 使用jupyter kernelspec list查看安装的内核和位置

进入安装内核目录打开kernel.jason文件，查看Python编译器的路径是否正确

如果不正确python -m ipykernel install --user重新安装内核，如果有多个内核，如果你使用conda create -n python2 python=2,为Python2.7设置conda变量,那么在anacoda下使用activate pyhton2切换python环境，重新使用python -m ipykernel install --user安装内核.（通用情况）

或者直接进入kernel.json里更改py36(这是属于我的情况)

重启jupyter notebook即可。

以上这篇jupyter notebook参数化运行python方式就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持我们。

本文标题: jupyter notebook参数化运行python方式

本文地址: http://www.cppcns.com/jiaoben/python/307018.html

jupyternotebook运行python_jupyter notebook参数化运行python方式相关推荐

python notebook怎么运行_jupyter notebook简单使用教程
1.jupyter notebook简介 jupyter notebook是一个在线编辑器,可以在网页上编辑程序,在编辑的过程中,每次编辑一行代码就可以运行一行代码,运行的结果也可以显示在代码的下方, ...
visual studio code Python终端运行_VS Code 6 月 Python 扩展更新
优质文章,第一时间送达! 微软发布了 6 月的 Visual Studio Code Python 扩展更新,此版本除了解决 53 个问题外,还开发了新功能,例如逐行运行和启动页面. 逐行运行(Run ...
使用crontab自动化调度jupyter notebook定时运行
使用crontab自动化调度jupyter Notebook定时运行目录使用crontab自动化调度jupyter Notebook定时运行定时任务定时调度jupyternotebook脚本及 ...
python运行非常慢的解决-提升Python程序运行效率的6个方法
Python是一个很酷的语言,因为你可以在很短的时间内利用很少的代码做很多事情.不仅如此,它还能轻松地支持多任务,比如多进程等.Python批评者有时会说Python执行缓慢.本文将尝试介绍6个技巧, ...
python程序运行键_python学习笔记-python程序运行
小白初学python,写下自己的一些想法.大神请忽略. 安装python编辑器,并配置环境(见http://www.cnblogs.com/lynn-li/p/5885001.html中 python ...
linux启动设置运行级别,Linux的运行级别和设置开机启动服务的方式
Linux的运行级别什么是运行级别呢?简单点来说,运行级别就是操作系统当前正在运行的功能级别.级别是从0到6,具有不同的功能.这些级别定义在/ect/inittab文件中.这个文件是init程序寻找 ...
linux如何查看jupyter日志_在Linux服务器上运行Jupyter notebook server教程
在Linux服务器上运行Jupyter notebook server教程很多deep learning教程都推荐在jupyter notebook运行python代码,方便及时交互.但只在本地运行 ...
python文件闪退_python运行窗口闪退（python打开文件出现闪退什么原因）
有时候,我们在运行python程序的时候会闪退,到底是什么原因呢?python文件是以.py结尾的,可以自己在python环境下运行的.对于这种闪退的情况,大概可以从以下几个方面分析. 第一步首先找 ...
安卓运行Jupyter Notebook操作指南，不用电脑也能做数据分析！
作者 | Datawhale 来源 | Datawhale(ID: Datawhale ) ** [导读]今天介绍下Pydroid 3这款堪称是Android上最易用且功能最强大的Python3 ID ...

jupyternotebook运行python_jupyter notebook参数化运行python方式

jupyternotebook运行python_jupyter notebook参数化运行python方式相关推荐

最新文章

热门文章