2023年1月6日

docker composeのvolumesでpermission deniedになったりならなかったりする

Aしたりしなかったりする、という報告は多い。
つまり、毎回起きるわけではないというわけだ。
もちろん、バグで無いこともある。ただ、毎回同じ動作をしないので訳がわからんとか。

もう1つ気にしないといけないのは、頻度の表現方法についての個人差や状況の差だ。
例えばプロジェクトのお仕事をしていて「起きたり起きなかったり」という話をすると、だいたいは何か特定のことを行った場合だと思う。
そうではなく、何かの勉強中だったとすると、練習で同じようなことをやっているのだけれども結果が安定しない、ということがあるかもしれない。

 

何が言いたいかというと、docker compose の勉強をしていたけれども、volumes で永続化させようとしていただけなのに permission denied になって書き込めない環境があった、という話だ。

お仕事で permission denied になる環境があったので、それを最低限の構成にして状況を探っていこうと思い自作したのだけれども現象が起きなかった、というわけだ。


作ったのは、これ。

https://github.com/hirokuma/dockertest1

私は Dockerfile などの自作にまったく自信がないので、vscode の Dockerプラグインに作ってもらった。
再現はできなかったけど。
permission denied ということは chmod とか USER とかそういうところかと思ってコメントアウトしたのだが、ホスト環境から見ると root 権限で書き込まれてはいるものの動作に問題は無い。

なんだろうねぇ。

2022年12月25日

wslで動かしたdockerは全部閉じても動いていた

Windows10 でも wsl2 は動く。
ファイルシステムがどうなっているのかは調べていないが、lmdb も動いたことだしなかなか動いてくれそうだ。

 

で、最近お仕事で docker のコンテナを動かすことがあり、wsl 上の Ubuntu 20.04 でどうなのか気になっていた。
起動するときはコンソールを立ち上げるが、そのコンソールが閉じたときにどうなっているのだろうか?

 

docker だとわかりにくいと思ったので、 watch でフォアグラウンドではあるが動かし続けた。

image

う^-ん?

止めてみよう。

image

変わらんな。。。

慎重に見ればまた違ったのかもしれないが、タスクマネージャーのレベルでは現れなさそうだ。
dockerコンテナでも同じようなことをしてみたが、ちょっとわからんかった。

 

「詳細」を見てみると、wsl.exe が 2つ、wslhost.exe が複数、 wslservice.exe が 1つ立ち上がっていた。

image

wslhost.exe は 6つ立ち上がっていたのだが、たぶんここには現れないのではないかな。

もちろん ps で見ると複数立ち上がっているので、動いていないわけではない。

まあ、Windows の動作にとって wsl が動いているというのは考慮すべきではないというか、うちはうち、よそはよそ、というところなのではないかと思っている(個人の感想です)。
Unix/Linux 的な環境で本番運用するのであれば、わざわざ Windows が動いている必要はないのだ。Windows の立ち位置としては開発環境の提供くらいなものだろう。

 

なので Windows 側から wsl で動いているプロセスが見えないのは、そんなものだろうと思っている。
ただ・・・あのペンギンはなんとかならなかったのだろうか。

image

怖いよ。

2022年12月24日

nvs autoとcdするスクリプトは相性が悪そうだ

node.js の切替に nvs を使っている。

https://github.com/jasongin/nvs

nvs auto on しておくと、.node-version に使用したい node.js のバージョンが書いてあれば cd したときに自動で切り替わる。

 

私は Ubuntu を使っているのだが、デフォルトの node.js は v12.22.9 になっていた。
よく使うのは v16系なのだが、グローバルでインストールするようなコマンドも意識的に使っていないのでデフォルトのままにしている。
何か実装したり動かしたりするときに nvs use で指定しているのだが、たまに忘れてデフォルトのまま使ってしまい、なんか動きがおかしいなぁ、というところで気付いたりする。

そういうのを避けるために nvs auto on と .node-version は便利そうなのだ。


ただ、私の環境だと .bashrc で nvs auto on しているとなんか変だったのだ。
勝手に知らないディレクトリが作成されたり、エラーで mkdir の使い方が間違っていると出てきたり。

そして先ほど、.bashrc がこうなっているのに気付いた。

  • NVS_HOME などの設定
  • nvs auto on
  • GOPATH を設定するスクリプトの実行

よろしくなかったのは最後の GOPATH を設定するスクリプト。
ここ最近 GOPATH が必要なプロジェクトの作業ばかりしていたので GOPATH を設定するスクリプトを作って source コマンドで読み込ませていた。

#!/bin/bash

export GOPATH=$(cd $(dirname $BASH_SOURCE); pwd)
export PATH=$GOPATH/bin:$PATH
mkdir -p $GOPATH/src $GOPATH/pkg $GOPATH/bin

GOPATH をあちこち置いていたので、このスクリプトファイルを置いて読み込めばそのディレクトリを GOPATH になるようにしていた。

スクリプト中で cd しているところがあるのだが、これによって nvs auto on が作動してしまうようなのだ。
cd だから作動するのは当たり前なのだが、 .bashrc でこのスクリプトを実行することと nvs auto on の組み合わせによってターミナルを新しく開いたとき、特に vscode で開いたときの挙動がよくなかったようだ。

 

まあ、これは .bashrc の中でこういうスクリプトを走らせる方が良くないな。
スクリプトの場所=GOPATH の場所なので、直接そう書けば良いだけなのだ。あるいは nvs auto on の前に呼び出すようにするかだ。

2022年12月4日

[wsl2] lmdbは動くようになった

4年ほど前、こういう記事を書いていた。

hiro99ma blog: [lmdb][win10]Windows10 1803でWSLのファイル書込みがうまく動いてない?(2018/05/05)
https://hiro99ma.blogspot.com/2018/05/lmdbwin10windows10-1803wsl20180505.html

あれから、WSL2 といってよいのかな? 正式版になったそうだ。

ASCII.jp: Microsoftストア版WSLが正式版になり、Windows 10でも動作可能に (1/2)
https://ascii.jp/elem/000/004/114/4114859/

image

Windows10 Pro にインストールして使ってみた。

Ubuntu 20.04 は今回新規だが、WSL についてはUbuntu on Windows の時代から同じ PC を使っているので、まっさらな状態から試すわけではない。
・・・この PC ももう6年も使ってるんだな・・・。

 

gist に作っていたサンプルコードを動かした。

$ ./tst
test1(): OK
test2(): OK
  key(5)=test1, data(5)=TEST1
  

エラーになってないということは大丈夫になったのかな?
ファイルアクセスが遅いとかで見直しが行われるようなことをどこかで読んだ気がする。

 

VirtualBox などではなく WSL が使えると、ストレージにあらかじめ確保されるサイズがなくなると思うので、あまり空き容量がない私としてはとても助かるのだ。
いや、そうだろうか?

WSL 2 仮想ハード ディスクのサイズを拡張する | Microsoft Learn
https://learn.microsoft.com/ja-jp/windows/wsl/vhd-size

確保するやん。
探すと、確かに ext4.vhdx というファイルがある。

image

df で見ると 2GB に近いのは /dev/sdc だろうか。

/dev/sdc       1007G  1.7G  955G   1% /

にしても、この PC は 1007GBもないし、よくわからん。

2022年12月3日

[vbox] VirtualBox が急に動かなくなる

Windows11 で VirtualBox v7.0.4 + Ubuntu 22.04 を動かしているのだが、なんか急に操作を受け付けなくなることに気付いた。
ホスト側も重たくなってしまっている。

こちらの人はゲスト OS で Windows10 を動かしているようだが、こちらと同じような感じだ。

https://forums.virtualbox.org/viewtopic.php?f=6&t=107712

VBox.log を見るとこんなのが出ていて応答しなくなったようなのだ。

VMMDev: vmmDevHeartbeatFlatlinedTimer: Guest seems to be unresponsive. Last heartbeat received 4 seconds ago

あきらめて v6 にダウングレードした。
まあ、最初は仕方ないよねー

 

2022年12月3日 20:28追記

と思っていたのだが、ダウングレードしても応答しなくなるようになってしまった。
もしかしたら、いまやっている docker buildx build でやっている作業が原因なのか??

お仕事で docker buildx build する作業をやっているのだが、VirtualBox でやるのは初めてなのでこれが原因かどうかを判断できない。ありがちだが、ダウングレードしても前のファイルか何かが残っていて変になってしまったという可能性もありそうだ。アンインストールって、いろいろな可能性を考えてしまってファイルを残しがちになるので難しいよね。

 

・・・docker の線は消えた。
ゲストOS を立ち上げて vscode を立ち上げて放置していただけだが固まってしまった。
方式が違う VM の重ね合わせになるからかも、なんて考えていたが違ったようだ。

vscode が原因と言うことはないよな・・・?
ただ最近は direnv hook とか使ったり他にも設定し直したりしたので、vscode が直接ではないにしてもなくはないのか。
あとは、長い時間放置した後しか見ていないのでスリープみたいな電源制御もちょっと気になる。

わかるのは VM の CPU負荷が高いということだけで、本当にゲストOS 側でプロセスが立ち上がって非常に重たくなっているだけかもしれないのだ。

 

2022年12月4日 21:17追記

まだ現象が発生する。

いま疑っているのは kernel だ。
私の環境だと最新は GNU/Linux 5.15.0-56-generic x86_64 なのだが、インストールされている1つ前の GNU/Linux 5.15.0-53-generic x86_64 だと発生しない気がするのだ。

 

ブートローダで切り替えるのが面倒なのでデフォルトを 5.15.0-53 にしたかったのだが、どうにもうまくいかない。。。
/boot/grub/grub.cfg が最終的には使われているようだが、/etc/default/grub を変更して update-grub してもうまくいかんので、あきらめて apt remove/purge で削除した。

これで改善すると良いのだが。

 

2022年12月4日 22:24追記

あれから1時間が経過した。
未だに止まる気配がないので、これは成功したんじゃなかろうか。

りゆうはよくわからないが、VirtualBox と Linux 5.15.0-56 が相性が悪いとか、VBox Additions をやったことで相性が悪くなるとか、そんなことかもしれん。

む、ということは VirtualBox 7 にしたこと自体は影響がなかったのか。
元に戻そう。

 

2022年12月4日 23:41追記

VirtualBox 7 に戻して1時間が経過した。
未だに止まる気配がないので、やはり VirtualBox のバージョンには関係が無かったのか。
すまん、疑って。

2022年11月20日

[vbox] VirtualBox7にするとGuest Additionsのアップグレードがあった

VirtualBox のバージョン 7 がリリースされていた。

https://www.virtualbox.org/

アップグレードして Ubuntu を起動し、さあ Guest Additions をアップデートしようと CDイメージの挿入をしようとしたところ、メニュー項目が増えて「Upgrade Guest Additions...」があった。

選択するとアップグレードされるようだった。画像はアップグレード後に撮影したのでグレーアウトされているが、ちゃんと選択できるようになっていたのだよ。

image

CDイメージを挿入しても大した手間ではないとはいえ、面倒であることに変わりは無かったから助かる。

2022年11月13日

[npm] systemctl で npm を動かすのは面倒そうだ

お仕事で JavaScript というか TypeScript というか、node.js で動くアプリを作った。
サーバみたいなもので、ずっと動いていてほしい。

となるt、systemd というか systemctl というか、そういうやつで動いていてほしい。


最初は node.js へのフルパスを書いて、直接パラメータなども書いて動かしていた。
が、パラメータの種類が増えて、最後の方になると TypeScript のトランスパイルも行いたくなったので npm で pre などを付けて開発をしていた。

そこまでくると、node.js ではなく npm の方を使って systemctl で実行して欲しいと思うのが人情だろう。

npm も同じようにフルパスで書いてあげると、それは systemctl で動いた。
しかしそこから node を実行するようにしていると、そちらは PATH が通っていないために実行エラーになってしまった。
systemctl が動くユーザでも動くような PATH に置いてあれば良かったのだが、node は nvm とか nvs のようなバージョン管理している方のパスに置いていたのだった。
まあ、動かんよね。

 

検索してみたものの、あまり対策はなさそうだった。

  • node はパスが通ったところに置く
    • そうするとバージョン管理している意味が無いよね
  • スクリプトファイルを置いてそちらに全部書く
    • まあこっちが妥当なのかな
  • node をフルパスで書いて npm を使わない

というわけで、今回は 最後のパターンを使った。
systemctl みたいな権限を使って実行するのだったら、パスの回避だけでスクリプトを作りたくなかったというところか。スクリプトで実行すること自体に意味があるんだったらやったのだけど、今回はそうじゃなかったからなぁ。

2022年11月5日

[win11] エクスプローラの上側が大きい

うまく表現できなくて済まない・・・。

image

Windows Update をしたら見た目が変わっていた。
タブが増えて、使わないツールバーだけでも広かった領域がさらに広々してしまった。
表示を小さくできないだろうか。

 

困ったときの Explorer Patcher !!

image

という設定にするとここまで小さくなった。

image

そうそう、このくらいがありがたいのだよ。

フォルダーオプションがなくなってしまったのだが、それは Open Shell のツールバーに追加してしまえばよさそうだ。
以前は Open Shel のツールバーはアイコンが右側に寄っていたのだが、Windows Update してからか左側に寄って表示されるようになった。まあ、そのくらいは気にしなくてよいか。

2022年11月3日

[win11]ディスプレイ間でカーソルを簡単に移動させる

うちはトリプルモニタだ。
すごそうに聞こえるかもしれないが、昔使ったモニタを捨てられずに使っていたり、Raspberry Pi 用に買ったものをつないだりした結果である。

image

ディスプレイの配置は Windows10 のときから変えていなかったのだが、カーソルの動きが違った。
1番から3番にカーソルを移動するとき、3番の範囲にない位置から下げても 3番のモニタにカーソルが出てくるのだ。

私はトラックボールで適当にカーソルを動かすので、1番から2番に移動するときに斜めになって2番にたどり着く前に 1番の画面下にたどり着くことがしばしばある。
今までだとカーソルが下を滑って2番にたどり着いていたのだが、今の設定だと3番に飛んでしまうのだ。
そして 3番から 1番に上げても、それは 3番のあった位置の真上にカーソルが戻ってしまう。

説明がわかりにくいので図にすると、赤のようにカーソルを滑らせて青のように進んでほしいのだが、実際は緑色のようになってしまうのである。

image

 

対処はすぐ見つかった。
設定画面のディスプレイのところに項目がある。

image

これにチェックが入っていたので外せば今までのような移動に戻った。
よかったよかった。

Windows11 にアップグレードした

会社の PC を新調したら Windows11 Home だった。

なんとかなるかなー、と思っていたが、意外と何ともならないところが多かった。
「何ともならない=素のままでは使うのに手間がかかると私が考える」であって、Windows11 がどうのこうのは知らん。
あくまで主観だ。

会社だけだと使い勝手をよくするために時間が取りづらいので、家の PC も Windows11 Pro にアップグレードした。以前が Windows10 Pro だったのでそのまま Pro が引き継がれたようだ。
会社の PC は新規だったので Home だが、それまで使っていた PC が Windows10 Pro だからアップグレードだけ持って行けないか調べたけどよくわからんかった。元々 Windows10 Home から Pro にアップグレードしたものだからプロダクトキーがあればよさそうだけど、忙しくて探す暇が無いのよねぇ。

 

コンテキストメニュー

Explorer で右クリックすると出てくるコンテキストメニューだが、Windows10 まではいろいろとツールが登録したメニュー項目が出てきて邪魔だと思われたせいか、Windows11 ではシンプルなものが最初に表示されるようになった。
Windows10 風のメニューを表示するにはメニューからクリックするか、最初からシフトキーを押しながら右クリックするかの操作になる。

最初はそのまま使っていたのだが、シンプルなコンテキストメニューの内容を使うことが無いので毎回1クリック操作が必要だった(そのときはまだシフトキー+右クリックが使えなかった)。

image

この中でよく使いそうなのって新規作成とプロパティくらいしかなさそうだ。それも「かろうじて」くらいなレベルである。昔に戻したいという気持ちも分かってもらえるだろう。

 

レジストリを編集してやればできるそうだが、今後もしばしばやり直すことになりそうなのでツールを使った。

Windows 11の秩序ある右クリックメニューを混沌へと戻す「Windows 11 Classic Context Menu」 - Windows 11で絶対使いたいアプリ - 窓の杜
https://forest.watch.impress.co.jp/docs/serial/win11must/1363937.html

タスクバー

タスクバーのメニューを左端に移動することはできたが、なんだかなんだかな感じだ。

こちらのツールでいろいろ変更できる。

GitHub - valinet/ExplorerPatcher: This project aims to enhance the working environment on Windows
https://github.com/valinet/ExplorerPatcher

コンテキストメニューの件もこのツールでできそうだが、まあよかろう。

タスクバーの高さを低くできたのがありがたい。Quick Launch を使っているのだけどそのままだと妙に高さが合わなかったのだ。
あと、このツールのおかげかどうか分からないが時計のカスタマイズに TTClock が使えるようになったのも助かっている。

こういったアイコンの表示も消すことができる。
歯車アイコンって私の PC だと使うものが無いから消したかったのだ。

image

右側の吹き出しアイコンも使い道がない。 Windows10 だと設定を開いたりスクリーンショットを撮るアプリを起動するために使っていたのだけど Windows11 ではどちらもない。カレンダーは見ないし、通知は再起動とかアプリのインストールが出てくるくらいなので用途を見いだせない。
が、一番右端に時計が来ると妙に見づらいのだ。なんでだろう? まあいいや。

 

昔は、コンテキストメニューの整理や新規作成する項目の整理を頻繁にしていたのだが、もうあきらめた・・・。やってもやっても復活してくるので心が折れたのだろう。
そういう点ではコンテキストメニューの方式が新しくなったのはよいと思っている。ユーザが表示したいメニューをカスタマイズできるようになるとありがたいのだが。アプリによってはそっちのメニューにも追加されている。ターミナルとか DropBox なんかは出てきてたので、できなくもないのだろう。

 

メニュー

左側に移動したメニューアイコンだが、メニュー自体は Windows10 から使っている Open Shell がそのまま使えている。

Welcome to the Open-Shell-Menu | Open-Shell-Menu
https://open-shell.github.io/Open-Shell-Menu/

このツールにはいつもお世話になっております。

メニューだけでなく Explorer にツールバーを出すことができて、そこで表示の切り替え(小アイコン、詳細などのあれ)や非表示ファイルを表示させたりのアイコンを置くことができて便利だ。


こんな感じでツールを使いながらどうにかこうにか Windows11 で生きていけそうだと思っている。

使う頻度が高い Explorer の表示がまだちょっと慣れないかな。
なんでこんなにフォルダの左側にスペースが必要なんだろう、とか。

image

ファイラーを別途導入するのも考えた方が良いのか。