--binary / -b:
Windows users using WSL, MSYS2, or Cygwin, should use this option when using a native jq.exe, otherwise jq will turn newlines (LFs) into carriage-return-then-newline (CRLF).

ということで「binary」オプションをつけてやるとちゃんと最後に改行つけて吐き出してくれるようでした。

ので上記エントリの「clean=jq …」のところの呼び出しに、下記のように「-b」つけてやることで解決しました。

  clean = jq -b --indent 2 --monochrome-output '. + if .metadata.git.suppress_outputs | not then { cells: [.cells[] | . + if .cell_type == \"code\" then { outputs: [], 　execution_count: null } else {} end ] } else {} end'

2022-04-22

Windowsのpython3.10にpythonnetを入れようとしてエラーがでる

Windowsのpython3.10にpipでpythonnetをいれようとしたらエラーがでてインストール出来ませんでした。

色々と調べて古いバージョンのBuild Toolsとか入れたりしたんですがダメ。

さらに調べると、実はpythonnetは公式では3.8までしか対応しておらず、3.9用もそれ用のwhlファイルをダウンロードしてきて入れないと入らないのだとのこと。

python - How to fix error during pythonnet installation - Stack Overflow
https://stackoverflow.com/questions/67418533/how-to-fix-error-during-pythonnet-installation

でも、3.9 のanacondaは対応しているようで、anacondaの環境下では pip でさっくり入りました。
で一度anacondaで入れると、このwhlファイルがダウンロードされてきてキャッシュされているため、Windowsのpythonを3.9にしてやると、そちらでもそのままpipで入れることができました。

ちょっと不思議な気もしますがそういうもんなんですねえ。

2022-04-06

numpyのバージョンが合わない問題

pc neuro

とあるツールを動かそうとしたらこんなエラーが出ました。

RuntimeError: module compiled against API version 0xf but this version of numpy is 0xe

どうもnumpyのバージョンが想定されているものと合っていないらしかった。
こういう場合、pipでnumpyのバージョンを上げれば解決するらしいのだが

$ pip install numpy --upgrade
ERROR: pip's dependency resolver does not currently take into account all the packages that are installed. This behaviour is the source of the following dependency conflicts.
numba 0.55.1 requires numpy<1.22,>=1.18, but you have numpy 1.22.3 which is incompatible.

と言われてしまい解決せず。

ただ、下記エントリに同様の件が上がっていました。

pipの厳格な依存関係チェックにハマってしまった時の解決方法備忘録メモ - Qiita https://qiita.com/y-vectorfield/items/effed435c42d8bad42ac

numbaのバージョンを上げればよい模様

pip install numba --upgrade

これで解決できました。
ありがたい。

…と思ったらそんなことなかったのです。

numbaはすでにupgradeされており、pip installしたらnumpyのバージョンを1.21に下げてくれました。
というわけで結局元の問題は解決せず…

どうやらnumbaはまだnumpyは1.21じゃないと動かないため、ここは必須要件のようでした。
さてさて困ったね。

どうもmatplotlibがこのエラー吐いているため確認すると matplotlib-3.1.0 でした。

$ pip show matplotlib
Name: matplotlib
Version: 3.1.0

ほかの環境では matplotlib-3.1.1 だったので、もうちょいバージョンを上げてみることにする。

$ pip install matplotlib==3.1.2

これで解決できました！

うーん、しかしいったいどういうことなんだろう…
anacondaの3.1.0のイメージがコンパイル時のnumpyバージョンが高かったってことなんだろうか？

2022-01-28

印刷スプーラーの脆弱性（PrintNightmare）対策パッチ（KB5005565）から始まる悪夢

pc security

あるWindowsサーバの再起動をしたところ、共有プリンタが使えなくなるという障害が発生したということで、調査対応しました。

Windowsサーバにプリンタが接続されており、そのサーバ上からはテストプリントなど通るものの、既に設定されていた共有プリンタからのアクセスはできなくなっていました。

ネットワークプリンタにアクセスしようとすると

0x0000011bエラー

が発生してアクセスできないことがわかりました。

これで調べてみると、去年の秋2021年9月頃に出た印刷スプーラーの脆弱性（PrintNightmare）という脆弱性に対する対策パッチKB5005565が当たると、共有プリンタが使えなくなるという問題が起きていたことがわかりました。

servercan.net

Windowsセキュリティ更新プログラム（2021年9月14日公開）のKB5005565、（2021年10月12日公開）のKB500670などを適用したら、共有プリンターに対して印刷出来なくなりました
https://faq2.epson.jp/web/Detail.aspx?id=52608

このサーバOSはWindows Server 2012だったのですが、結構長くWindows Updateが掛かっていなかったものが、再起動のタイミングでWindows Updateがかかっていたことがわかりました。

それでWindows Updateで当たったパッチを調べると

5009624
5008870
5008868
5008263
5007247

の5件が当たっていました。

ここでは問題の5005565は出てきていなかったのですが、調べていくとどうも5007247が関係しているっぽい？という感じだったため、消して試してみることにしました。
が、パッチを消すと
5007247 -> 5006714 -> 5005613 -> 5005076
という感じに対応する古いパッチが順に当たってしまう…　という状況になりました。

とりあえずそこまで全部消してみたのですがエラーの起きる状況は変わらずでした。
また、5009624は色々と問題が出ているパッチのようでした。

Windows 8.1 および Windows Server 2012 R2 | Microsoft Docs
https://docs.microsoft.com/ja-jp/windows/release-health/status-windows-8.1-and-windows-server-2012-r2

そのため一旦この時に入った上記パッチを全部削除することで試してみることにしました。

すると…

無事にどのPCからも共有プリンタへアクセスできるようになりました！！

サーバPCが古いこともあって、パッチを一つ一つ外しては動くようになっているか試すのにもんのすごい時間がかかって、この件でまるまる2日近くも消費してしまいました。もう勘弁して…　という感じです。

2021-11-15

aws-ec2-sshのインストールではまった点

pc server

aws-ec2-ssh という、AWSのIAMで登録しているユーザでそのままLinuxのユーザ管理と同期できるツールがあります。

でこれをインストールしたんですが、ちょっとだけはまったのでメモ。

基本的には下記エントリーの内容そのままやればよいです。

qiita.com

最初、aws-ec2-ssh の公式ページ見て、先に出ていたrpmのほうで入れたのですが、install.shで入れるほうが問題が少ないような感触です。
一旦rpmで入れたのですがやめて再度install.shで入れなおしました。

それでよい感じと思ったんですが、/etc/passwd は更新されてるのに入れない…となりました。

実は /etc/ssh/sshd_config が変更されているため、sshdの再起動をしてやる必要があります。
公式ページにはそのこと書いてなくて、再起動しなかったのではまったのでした。

2021-11-12

Goofys のインストール

pc server

仕事で ec2 から S3 をマウントできる Goofys というのを入れてたんですが、インストール時にエラーが出てはまったのでメモ。

Goofysはgoが入ってれば普通は

 go get github.com/kahing/goofys

だけでインストールできるのですが

go/src/github.com/kahing/goofys/api/common/conf_azure.go:272:34: accountsRes.Value undefined (type storage.AccountListResultPage has no field or method Value)
go/src/github.com/kahing/goofys/api/common/conf_azure.go:373:35: not enough arguments in call to client.ListKeys
    have (context.Context, string, string)
    want (context.Context, string, string, storage.ListKeyExpand)

のようにエラーが出て素直に入れれませんでした。

で、調べてみると一旦ダウンロードしてからinstallにすれば通るといったエントリーもあったのですが、自分はそれではうまくいきませんでした。

goofys入れるのてこずった。 – 楽にしてください。

こちらのエントリーからgithubのissueを参照しました。

github.com

結局 git clone でソース持ってきて、git submodule update してから go install するというものでした。
これで無事に入ったんですが、なんでこの環境だとこうなるんだろう？というのは謎です。

ちなみにAWS上のRHEL8.5でした。

2021-11-10

VSCodeでPHP-5.4のコーディングをする設定

今関わっている開発案件がPHP-5.4のソースで、VSCodeのIntelephenseが「mysql_query」とかのメソッドをそんなのねえよ！と赤線引いてくる問題が出ていました。
まあ無視すればいいのですが、ほんとのエラーと見分けがつかなくて困るのでなんとかしたい。

これを検索するとだいたい、VSCodeの設定を開いてIntelephenseの設定項目「Intelephense > Environment: PHP Version」か、setting.jsonに「intelephense.environment.phpVersion」の項目作って、バージョン指定で「5.4.0」とか入れればよい、と書いてあります。
ところがいくらやってもそれでは赤線が消えてくれませんでした。

Why is intelephense not recognizing mysql_pconnect when aimed at php v5.3? - Stack Overflow
ここに、デフォルトのスタブリストから「mysql」が消えてるから追加しろと書いてありました。

VSCodeの設定開いて、上の「設定の検索」のところに「stubs」といれてやるとintelephenseのstubsの設定項目が出てくるため、その一覧の一番下に「項目の追加」というのがあるのでそこを押すとセレクターになり、「mysql」があるので選択して「OK」にしてやります。
これで無事にmysql_queryとかの赤線が消えてくれました。

モーグルとカバとパウダーの日記

モーグルやカバ(EXカービング)山スキー(BC)などがメインの日記でした。今は仕事のコンピュータ系のネタが主になっています。以前はスパム対策関連が多かったのですが最近はディープラーニング関連が多めです。

NSEG勉強会 #106

chrome上のWebアプリでCtrl+nを使いたい

Windows11で共有ファイルサーバが見れない

ColabやJupyterのノートをgitで管理するための設定