docker login docker pull archlinux/base docker build -t antergos_base . docker -it --rm antergos_base bash docker save antergos_base > antergos_base.tar # tag情報は保存されない docker load < antergos_base.tar # need afterwards: docker tag 6834.... hoge/hoge:latest docker export antergos_base > antergos_base.tar docker import antergos_base.tar antergos_base docker image ls docker ps -a docker rm $(docker ps -aq) docker image rm id
球面調和関数係数(3 x n行列)の可視化
3次元空間にひと塊の形(球と同相)があって、その表面上の点の集合を考える。何らかの方法で塊は球面に変形できて、その変形に伴って点の集合は球面上に写される、と考える。その時、元のX、Y、Z座標をそれぞれ球面上の分布($S^{2} \to \mathrm{R}$)と考えると、これは球面調和関数で分解できることになる。3つ係数の列が取れるので、それを3xnの行列とする。これを元の塊の表面に戻すのは、係数を使って色々の$\theta$、$\phi$についてX、Y、Zを計算してやるだけで良い。
続きを読むpythonからシェルスクリプトを呼び出す
一塊になったシェルスクリプトをリファクタリングしている。
- ただ呼び出す場合
import subprocess class ShellException(Exception): pass def shell_exec(cmd: str, timeout_s: float = 0) -> None: cmd_org = cmd timeout_s = "" if timeout_s == 0 else "timeout {} ".format(timeout_s) cmd = "set -euxo pipefail\n" + timeout_s + cmd proc = subprocess.run(cmd, shell=True, stdout=subprocess.PIPE, stderr=subprocess.STDOUT) print(proc.stdout.decode('utf-8')) if proc.returncode != 0: msg = "Execution of \"{}\" failed. \n\n {}" sh_msg = proc.stdout.decode('utf-8') raise ShellException(msg.format(cmd_org, sh_msg)) shell_exec("echo 'Hello World!'")
- 値を取り出す場合
import subprocess class ShellException(Exception): pass def shell_valueof(cmd: str, timeout_s: float = 0) -> str: cmd_org = cmd timeout_s = "" if timeout_s == 0 else "timeout {} ".format(timeout_s) cmd = "set -euo pipefail\n" + timeout_s + cmd proc = subprocess.run(cmd, shell=True, stdout=subprocess.PIPE, stderr=subprocess.PIPE) if proc.returncode == 0: return proc.stdout.decode('utf-8') else: # return "" msg = "Execution of \"{}\" failed. \n\n {}" sh_msg = proc.stdout.decode('utf-8') raise ShellException(msg.format(cmd_org, sh_msg)) val = shell_valueof("pwd")
vscodeでmarkdownからpdfに変換する
Makdown MathとMarkdown PDFという拡張機能をインストールしてみた。Visual Studio Code - ArchWikiとError: Failed to lanuch chrome! · Issue #97 · yzane/vscode-markdown-pdf · GitHubを見て取り敢えずchromiumの実行ファイルのパスを入力した(~/.config/Code\ -\ OSS/User/settings.json
に"markdown-pdf.executablePath": "/bin/chromium"
を追記)ところ一応動いているようである。
tex対応についてはtex環境を整えるのが面倒なので、VSCode の Markdown で数式を表示して PDF 化する - Qiitaに従ってkatexを利用できるようにした。
doubleしか入っていないCSVをパースするプログラム
要件はメモリ128GBのPCで70GBのCSVをnp.ndarray形式でメモリに乗せること。np.load_txtも一応試したが、エラーでターミナルやブラウザも巻き込んで落ちた。std::ios::seekdirは相対位置指定にしか使えないはずだが、enumのため型変換されて、引数一つだけで与えてもコンパイルエラーになっていないことに気付くまでが一番長かった(c++ - Istream seekg() offsets and ios::end - Stack Overflow)。かなり遅いがI/Oがボトルネックなのかも知れない。
pybindでC++からpythonを呼び出す実行ファイルを作る
それほど難しくないはずだが、実際バグらせると無限のコンパイルエラーが出て結構つらい。以下はサンプルコード。
続きを読むVirtualboxにUSBからWindowsをインストール
VirtualBoxでのUSBデバイス認識 - Qiita: USBを認識できるようにする
- Extension Packは
yay -S virtualbox-ext-oracle
でインストール - USBを認識したが、virtualboxのブートメニューにusbはなし
sudo vboxmanage internalcommands createrawvmdk -filename ~/usb.vmdk -rawdisk /dev/sdX
はVERR_WRITE_PROTECTエラーが出て失敗- live usb - How to boot from a USB drive in VirtualBox? - Ask Ubuntuに従ってUSBからvmdkファイルを作成
- Windows10 - 新規ローカルアカウントの作成 - PC設定のカルマ
- Extension Packは
pacman -S virtualbox-host-modules-arch
してsudo modprobe vboxdrv && sudo /sbin/rcvboxdrv setup
した記憶あり- Windows7-CapsLockをCtrlに変更する CapmNetwork
クラスタリングについてのとても浅い理解
クラスタリングのお勉強をしている
続きを読むdocker内でpython実行するやつ
GitHub - tak0kada/dpythonを書いた。.bashrcにexport PATH="$PATH:~/bin"
を追記しておけば、普通のpythonの代わりにdpython、ipythonの代わりにdipythonを使える。$PWD
しかマウントしないが、データ解析に使うのにそれ以外のディレクトリにアクセスできる必要は今のところなさそう。yak shavingのしすぎなのでこれから進捗を出す。