Jupyter on Hacper's Blog https://hacperme.com/tags/jupyter/ Recent content in Jupyter on Hacper's Blog Hugo -- gohugo.io zh Sun, 28 Oct 2018 06:36:49 +0800 如何让 jupyter notebook 支持 MATLAB 程序？ https://hacperme.com/posts/notes/2018-10-28-jupyter-notebook-install-matlab-kernel/ Sun, 28 Oct 2018 06:36:49 +0800 https://hacperme.com/posts/notes/2018-10-28-jupyter-notebook-install-matlab-kernel/ 我之前安装的 MATLAB 的版本是 2017a，曾尝试过安装 jupyter 的 MATLAB 内核，但是失败了，网上说要 2017b 的版本才能用。 正好今天帮别人安装了 MATLAB 2018a，然后顺带在自 我之前安装的 MATLAB 的版本是 2017a，曾尝试过安装 jupyter 的 MATLAB 内核，但是失败了，网上说要 2017b 的版本才能用。

正好今天帮别人安装了 MATLAB 2018a，然后顺带在自己的电脑上也安装了新版本，尝试再次安装 jupyter 的内核，结果是成功的。以后可以在 jupyter notebook 上写 MATLAB 程序的笔记了。

安装过程不复杂，就两部分：

  • 安装 The MATLAB Engine API for Python
  • 安装 Matlab kernel for Jupyter

安装 MATLAB 的 Python 引擎

进入MATLAB的安装目录，找到 extern\engines\python这个路径，并拷贝下来。比如我的安装位置是：

I:\matlab2018a\extern\engines\python

然后打开 cmd 切换到 I:\matlab2018a\extern\engines\python 目录下：

1
2
3

D:\Users\tracis>i:

I:\Listary>cd I:\matlab2018a\extern\engines\python

输入安装命令：python setup.py install

1
2
3
4
5
6
7
8
9

I:\matlab2018a\extern\engines\python>python setup.py install
running install
running build
running build_py
running install_lib
copying build\lib\matlab\engine\_arch.txt -> I:\python36\Lib\site-packages\matlab\engine
running install_egg_info
Removing I:\python36\Lib\site-packages\matlabengineforpython-R2018a-py3.6.egg-info
Writing I:\python36\Lib\site-packages\matlabengineforpython-R2018a-py3.6.egg-info

安装 jupyter 的 MATLAB 内核

在 cmd 输入安装命令：

pip install matlab_kernel

查看已安装的 jupyter 内核：

jupyter kernelspec list

1
2
3

Available kernels:
  matlab     i:\python36\share\jupyter\kernels\matlab
  python3    i:\python36\share\jupyter\kernels\python

Available kernels 下有 matlab，说明安装成功了。

尝试 MATLAB notebook

启动 jupyter notebook，尝试在 jupyter notebook 中使用写MATLAB程序：

jupyter notebook

在 new 菜单下，选择创建 MATLAB 笔记本，以下是测试效果：

blob.jpg

创建一个全 1 方阵：
blob.jpg

画图：
blob.jpg

参考资料：

]]> jupyter notebook 学习笔记 https://hacperme.com/posts/notes/2018-06-08-jupyter_notebook_learnning_note/ Fri, 08 Jun 2018 23:59:31 +0800 https://hacperme.com/posts/notes/2018-06-08-jupyter_notebook_learnning_note/ 快捷键 查看快捷键 在右上角的== help->keyboard Shortcuts == 或者在命令模式按 H 常用快捷键 Command Mode (press Esc to enable) F : find and replace Enter : enter edit mode Shift-Enter : run cell, select below Ctrl-Enter : run selected cells Alt-Enter : run cell and insert below Y : change cell 快捷键
  1. 查看快捷键

在右上角的== help->keyboard Shortcuts ==
或者在命令模式按 H

  1. 常用快捷键

Command Mode (press Esc to enable)

  • F : find and replace
  • Enter : enter edit mode
  • Shift-Enter : run cell, select below
  • Ctrl-Enter : run selected cells
  • Alt-Enter : run cell and insert below
  • Y : change cell to code
  • M : change cell to markdown
  • R : change cell to raw
  • 1 : change cell to heading 1
  • 2 : change cell to heading 2
  • K : select cell abov- F : find and replace
  • Enter : enter edit mode
  • P : open the command palette
  • Shift-Enter : run cell, select below
  • Ctrl-Enter : run selected cells
  • Alt-Enter : run cell and insert below
  • Y : change cell to code
  • 1 : change cell to heading 1
  • 2 : change cell to heading 2
  • K : select cell above
  • Up : select cell above
  • Down : select cell below
  • J : select cell below
  • Shift-K : extend selected cells above
  • Shift-Up : extend selected cells above
  • Shift-Down : extend selected cells below
  • Shift-J : extend selected cells below
  • A : insert cell above
  • B : insert cell below
  • X : cut selected cells
  • C : copy selected cells
  • Z : undo cell deletion
  • D,D : delete selected cells
  • Shift-M : merge selected cells, or current cell with cell below if only one cell is selected
  • L : toggle line numbers
  • H : show keyboard shortcuts
  • Shift-Space : scroll notebook up
  • Space : scroll notebook downe

Edit Mode (press Enter to enable)

  • Tab : code completion or indent
  • Shift-Tab: tooltip (e.g. to get function arguments)
  • Ctrl-A : select all
  • Ctrl-Z : undo
  • Ctrl-/ : comment
  • Esc : enter command mode
  • Shift-Enter : run cell, select below
  • Ctrl-Enter : run selected cells
  • Alt-Enter : run cell and insert below
  • Ctrl-Shift-Minus : split cell at cursor

查看文档

  • 在 help 菜单有常用库文档的连接，包括 NumPy, Pandas, SciPy 和 Matplotlib.
  • 在一个库，方法或变量前加上 ?，你可以获得它的一个快速语法说明
1
2
3

  import random
  ?random.choice()
  # 查看帮助

1
2

??random.choice()
# 查看源码

1
2
3
4
5
6
7

Signature: random.choice(seq)

Docstring: Choose a random element from a non-empty sequence.

File: i:\python364\lib\random.py

Type: method

Jupyter Magic Commands

1
2

%lsmagic
# 查看所有魔法命令

1
2
3
4
5
6
7

Available line magics:
%alias  %alias_magic  %autocall  %automagic  %autosave  %bookmark  %cd  %clear  %cls  %colors  %config  %connect_info  %copy  %ddir  %debug  %dhist  %dirs  %doctest_mode  %echo  %ed  %edit  %env  %gui  %hist  %history  %killbgscripts  %ldir  %less  %load  %load_ext  %loadpy  %logoff  %logon  %logstart  %logstate  %logstop  %ls  %lsmagic  %macro  %magic  %matplotlib  %mkdir  %more  %notebook  %page  %pastebin  %pdb  %pdef  %pdoc  %pfile  %pinfo  %pinfo2  %popd  %pprint  %precision  %profile  %prun  %psearch  %psource  %pushd  %pwd  %pycat  %pylab  %qtconsole  %quickref  %recall  %rehashx  %reload_ext  %ren  %rep  %rerun  %reset  %reset_selective  %rmdir  %run  %save  %sc  %set_env  %store  %sx  %system  %tb  %time  %timeit  %unalias  %unload_ext  %who  %who_ls  %whos  %xdel  %xmode

Available cell magics:
%%!  %%HTML  %%SVG  %%bash  %%capture  %%cmd  %%debug  %%file  %%html  %%javascript  %%js  %%latex  %%markdown  %%perl  %%prun  %%pypy  %%python  %%python2  %%python3  %%ruby  %%script  %%sh  %%svg  %%sx  %%system  %%time  %%timeit  %%writefile

Automagic is ON, % prefix IS NOT needed for line magics.
  • 常用魔法命令
1
2
3
4
5

%env AA = '123'
# 设置环境变量

%env
# 列出环境变量

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66

env: AA='123'
{'ACTEL_FOR_ALTIUM_OVERRIDE': ' ',
 'ALLUSERSPROFILE': 'D:\\ProgramData',
 'ALTERA_FOR_ALTIUM_OVERRIDE': ' ',
 'APPDATA': 'D:\\Users\\tracis\\AppData\\Roaming',
 'CLASSPATH': ' .;I:\\Java\\jdk1.8.0_101/lib/dt.jar;I:\\Java\\jdk1.8.0_101/lib/tools.jar',
 'COMMONPROGRAMFILES': 'D:\\Program Files (x86)\\Common Files',
 'COMMONPROGRAMFILES(X86)': 'D:\\Program Files (x86)\\Common Files',
 'COMMONPROGRAMW6432': 'D:\\Program Files\\Common Files',
 'COMPUTERNAME': 'HACPER-PC',
 'COMSPEC': 'D:\\WINDOWS\\system32\\cmd.exe',
 'DRIVERDATA': 'D:\\Windows\\System32\\Drivers\\DriverData',
 'ENVCONTAINERTELEMETRYAPICMDLINE': '-st "D:\\Program Files\\NVIDIA Corporation\\NvContainer\\NvContainerTelemetryApi.dll"',
 'ENVCONTAINERTELEMETRYAPICMDLINEX86': '-st "D:\\Program Files (x86)\\NVIDIA Corporation\\NvContainer\\NvContainerTelemetryApi.dll"',
 'FP_NO_HOST_CHECK': 'NO',
 'HOMEDRIVE': 'D:',
 'HOMEPATH': '\\Users\\tracis',
 'JAVA_HOME': 'I:\\Java\\jdk1.8.0_101',
 'K2PDFOPT_CUSTOM0': 'Last Settings;-o D:\\Users\\tracis\\Desktop\\%b_k2opt;',
 'K2PDFOPT_CUSTOM1': '2-column paper;-mode 2col;',
 'K2PDFOPT_CUSTOM2': 'Trim Margins;-mode fw;',
 'K2PDFOPT_WINPOS': '-8 -8 872 720',
 'KMP_DUPLICATE_LIB_OK': 'TRUE',
 'LOCALAPPDATA': 'D:\\Users\\tracis\\AppData\\Local',
 'LOGONSERVER': '\\\\HACPER-PC',
 'MKL_SERIAL': 'YES',
 'NIEXTCCOMPILERSUPP': 'I:\\National Instruments\\Shared\\ExternalCompilerSupport\\C\\',
 'NO_XILINX_DATA_LICENSE': 'HIDDEN',
 'NUMBER_OF_PROCESSORS': '4',
 'ONEDRIVE': 'D:\\Users\\tracis\\OneDrive',
 'OS': 'Windows_NT',
 'PATH': 'I:\\FFMPEG~1\\bin;D:\\PROGRA~1\\Docker\\Docker\\RESOUR~1\\bin;I:\\PHANTO~1.1-W\\bin;I:\\PYTHON~1\\Scripts;I:\\PYTHON~1;I:\\ANDROI~1\\PLATFO~2;D:\\Windows\\System32\\wbem;I:\\Java\\jdk1.8.0_101/bin;I:\\Java\\jdk1.8.0_101/jre/bin;D:\\Windows\\System32;I:\\gcc\\bin;i:\\quartus\\quartus\\bin;D:\\Windows;I:\\OpenVPN\\bin;I:\\calibre\\;I:\\ANDROI~1\\NDK-BU~1;I:\\Redis\\;I:\\Git\\cmd;I:\\MATLAB\\runtime\\win64;I:\\MATLAB\\bin;D:\\Windows\\System32\\WINDOW~1\\v1.0\\;D:\\WINDOWS\\system32;D:\\WINDOWS;D:\\WINDOWS\\System32\\Wbem;D:\\WINDOWS\\System32\\WindowsPowerShell\\v1.0\\;D:\\WINDOWS\\System32\\OpenSSH\\;D:\\Program Files (x86)\\NVIDIA Corporation\\PhysX\\Common;I:\\Process Lasso\\;D:\\Users\\tracis\\AppData\\Local\\Microsoft\\WindowsApps;i:\\python364\\lib\\site-packages\\pywin32_system32;i:\\python364\\lib\\site-packages\\pywin32_system32',
 'PATHEXT': '.COM;.EXE;.BAT;.CMD;.VBS;.VBE;.JS;.JSE;.WSF;.WSH;.MSC;.PY;.PYW',
 'PROCESSOR_ARCHITECTURE': 'x86',
 'PROCESSOR_ARCHITEW6432': 'AMD64',
 'PROCESSOR_IDENTIFIER': 'Intel64 Family 6 Model 61 Stepping 4, GenuineIntel',
 'PROCESSOR_LEVEL': '6',
 'PROCESSOR_REVISION': '3d04',
 'PROGRAMDATA': 'D:\\ProgramData',
 'PROGRAMFILES': 'D:\\Program Files (x86)',
 'PROGRAMFILES(X86)': 'D:\\Program Files (x86)',
 'PROGRAMW6432': 'D:\\Program Files',
 'PSMODULEPATH': 'D:\\WINDOWS\\system32\\WindowsPowerShell\\v1.0\\Modules\\',
 'PUBLIC': 'D:\\Users\\Public',
 'QUARTUS_ROOTDIR': 'i:\\quartus\\quartus',
 'SESSIONNAME': 'Console',
 'SYSTEMDRIVE': 'D:',
 'SYSTEMROOT': 'D:\\WINDOWS',
 'TEMP': 'K:\\temp',
 'TMP': 'K:\\temp',
 'USERDOMAIN': 'HACPER-PC',
 'USERDOMAIN_ROAMINGPROFILE': 'HACPER-PC',
 'USERNAME': 'tracis',
 'USERPROFILE': 'D:\\Users\\tracis',
 'WINDIR': 'D:\\WINDOWS',
 'WINDOWS_TRACING_FLAGS': '3',
 'XILINX_FOR_ALTIUM_OVERRIDE': ' ',
 'JPY_INTERRUPT_EVENT': '1248',
 'IPY_INTERRUPT_EVENT': '1248',
 'JPY_PARENT_PID': '1212',
 'TERM': 'xterm-color',
 'CLICOLOR': '1',
 'PAGER': 'cat',
 'GIT_PAGER': 'cat',
 'MPLBACKEND': 'module://ipykernel.pylab.backend_inline',
 'AA': "'123'"}
  • 读写文件
1
2
3
4
5

%%file hello.txt
Hello, world
This is thing number 1
This is thing number 2
This is thing number 3

1

Writing hello.txt

1

%pycat hello.txt
  • %run 可以从.py 文件执行 Python 代码. 它也可以执行其他的 Jupyter notebook,

注意使用%run 并不等同于导入一个 Python 模块.

  • %store 命令可以让你在两个不同的 notebook 间传递变量。
  • 不带参数的%who 命令将会列出全局范围内存在的所有变量。如果传入参数，比如 str，将会列出指定类型的所有变量。
1

%who

1

random
  • %%time 将会给出 cell 的代码运行一次所花费的时间。
1
2
3
4
5

%%time
import time

for i in range(10):
    time.sleep(0.01)

1

Wall time: 106 ms
  • %timeit 使用 Python 的 timeit 模块，它将会执行一个语句 100，000 次(默认情况下)，然后给出运行最快 3 次的平均值。
1
2
3

%timeit
import numpy
%timeit numpy.random.normal(size=10)

1

13.3 µs ± 624 ns per loop (mean ± std. dev. of 7 runs, 100000 loops each)
  • 使用%%writefile 魔法保存 cell 的内容到一个外部文件。%pycat 则刚好相反，并且会向你展示高亮后的外部文件。
  • 使用%prun statement_name 将会产生一个有序表格来展示在该语句中所调用的每个内部函数调用的次数，每次调用的时间与该函数累计运行的时间。
1

%prun print('hello')

1

hello
  • 加上一个分号可以抑制最后一行函数的输出
1
2
3
4

%matplotlib inline
from matplotlib import pyplot as plt
import numpy
x = numpy.linspace(0, 1, 1000)**1.5

1
2

plt.hist(x)
# 有输出

1
2
3

(array([216., 126., 106.,  95.,  87.,  81.,  77.,  73.,  71.,  68.]),
 array([0. , 0.1, 0.2, 0.3, 0.4, 0.5, 0.6, 0.7, 0.8, 0.9, 1. ]),
 <a list of 10 Patch objects>)

output_31_0.png 

1

plt.hist(x);

output_30_1.png

  • 执行 shell 命令
1

!dir

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24

驱动器 K 中的卷是 DATA
卷的序列号是 537C-4A16

 K:\Workspace\python 的目录

2018/06/08  22:03    <DIR>          .
2018/06/08  22:03    <DIR>          ..
2018/06/08  20:39    <DIR>          .ipynb_checkpoints
2018/06/07  13:18    <DIR>          analyses_friend
2018/03/18  00:21    <DIR>          dataanalysis
2018/02/01  23:21    <DIR>          env
2018/06/07  23:20            10,575 fangzheng.ipynb
2018/03/24  22:47         1,780,465 get-pip.py
2018/03/02  00:44    <DIR>          gongzhonghao
2018/05/27  22:12    <DIR>          husespider
2018/03/17  15:53    <DIR>          jupyteconfig
2018/06/08  22:03            29,438 jupyter notebook.ipynb
2018/02/28  15:15    <DIR>          shuzixiaoyuan
2018/06/01  11:29            14,178 Untitled.ipynb
2018/05/25  07:53    <DIR>          wechatbot
2018/05/23  12:14    <DIR>          xuetangzaixian
2018/05/05  14:14             3,252 用 Python 统计字数.ipynb
               5 个文件      1,837,908 字节
              12 个目录 77,272,072,192 可用字节

书写 LaTeX

$$ P(A \mid B) = \frac{P(B \mid A) \, P(A)}{P(B)} $$

将多个 kernel 的代码组合到一个 notebook

  • %%bash
  • %%HTML
  • %%python2
  • %%python3
  • %%ruby
  • %%perl

加%%是整个 cell 都用那个 kernel 执行代码
而%是指在行以 kernel 执行相应代码

多光标操作

按住 Alt 进行点击和拖拽鼠标,再按方向键

The Jupyter output system

notebook 以 HTML 的方式进行展示，cell 的输出也可以是 HTML，所以事实上你可以返回任何东西：视频/音频/图像。

 1
 2
 3
 4
 5
 6
 7
 8
 9
10

# packages, modules, imports, namespaces
import numpy as np
from scipy.misc import factorial

# function definition with default arguments


def poisson_pmf(k, mu=1):
    """Poisson PMF for value k with rate mu."""
    return mu**k * np.exp(-mu) / factorial(k)

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17

# Jupyter notebook "magic" function
# Sets up "inline" plotting
%matplotlib inline

# Importing the seaborn plotting library and setting defaults
import seaborn as sns
sns.set_context("notebook", font_scale=1.5)

# Variable assignment
n = np.arange(10)  # [0, 1, 2, ..., 0]

# Note that poisson_pmf is vectorized
sns.barplot(n, poisson_pmf(n, 2))

# pass is a do-nothing statement -
# Used here to suppress printing of return value for sns.barplot()
pass

1
2

i:\python364\lib\site-packages\ipykernel_launcher.py:8: DeprecationWarning: `factorial` is deprecated!
Importing `factorial` from scipy.misc is deprecated in scipy 1.0.0. Use `scipy.special.factorial` instead.

output_40_1.png

安装扩展插件

1
2
3
4

!python -m pip install https://github.com/ipython-contrib/jupyter_contrib_nbextensions/tarball/master
!python -m  pip install jupyter_nbextensions_configurator
!jupyter contrib nbextension install
!jupyter nbextensions_configurator enable

参考文章

]]>