穀風

@Android Studio 3.2.1 on Ubuntu 18.04 LTS

Android Studio を 3.2.1 にしたところ、IDE Fatal Errors が発生するようになってしまいました¹。

具体的には以下のようなエラー。

Argument for @NotNull parameter 'message' of com/android/tools/idea/gradle/project/sync/GradleSyncState.syncFailed must not be null
java.lang.IllegalArgumentException: Argument for @NotNull parameter 'message' of com/android/tools/idea/gradle/project/sync/GradleSyncState.syncFailed must not be null
 at com.android.tools.idea.gradle.project.sync.GradleSyncState.$$$reportNull$$$0(GradleSyncState.java)
 at com.android.tools.idea.gradle.project.sync.GradleSyncState.syncFailed(GradleSyncState.java)
 at com.android.tools.idea.gradle.project.sync.idea.IdeaSyncPopulateProjectTask.doPopulateProject(IdeaSyncPopulateProjectTask.java:135)
 at com.android.tools.idea.gradle.project.sync.idea.IdeaSyncPopulateProjectTask.populate(IdeaSyncPopulateProjectTask.java:97)
 at com.android.tools.idea.gradle.project.sync.idea.IdeaSyncPopulateProjectTask.access$000(IdeaSyncPopulateProjectTask.java:39)
 at com.android.tools.idea.gradle.project.sync.idea.IdeaSyncPopulateProjectTask$1.run(IdeaSyncPopulateProjectTask.java:86)
 at com.intellij.openapi.progress.impl.CoreProgressManager$TaskRunnable.run(CoreProgressManager.java:750)
 at com.intellij.openapi.progress.impl.CoreProgressManager.lambda$runProcess$1(CoreProgressManager.java:157)
 at com.intellij.openapi.progress.impl.CoreProgressManager.registerIndicatorAndRun(CoreProgressManager.java:580)
 at com.intellij.openapi.progress.impl.CoreProgressManager.executeProcessUnderProgress(CoreProgressManager.java:525)
 at com.intellij.openapi.progress.impl.ProgressManagerImpl.executeProcessUnderProgress(ProgressManagerImpl.java:85)
 at com.intellij.openapi.progress.impl.CoreProgressManager.runProcess(CoreProgressManager.java:144)
 at com.intellij.openapi.progress.impl.CoreProgressManager$4.run(CoreProgressManager.java:395)
 at com.intellij.openapi.application.impl.ApplicationImpl$1.run(ApplicationImpl.java:305)
 at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)
 at java.util.concurrent.FutureTask.run(FutureTask.java:266)
 at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
 at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
 at java.lang.Thread.run(Thread.java:745)

datetime オブジェクト、Unix time、文字列の相互変換まとめ を書いたので、ついでと言っては何ですが date と datetime の変換についてもまとめてみました。

画像としてダウンロード

Python で datetime オブジェクト 、 Unix time、文字列を相互変換する方法はいろいろあります。 中には直感に反するものもあり¹、 過去に1度間違えたのに、再度間違えるということもしばしば。

そこで、2度と間違えないように、個人的にベストと思う方法をまとめてみました。

画像としてダウンロード

変換には様々な方法があるので、上記が唯一の方法というわけではありませんが、 なるべく、安全かつシンプルになるものを選んだつもりです。

また、変換可能でも、安全では無いと判断したものは矢印を引いていません²。

先日、「datetime のコンストラクタでタイムゾーンは指定しない方がよい」と書いたのですが、 datetime.combine() でも同様の問題が起こりました。

以下のように、日本のタイムゾーンが +9:19 になってしまうのです。

「サマータイムのある地域で」とタイトルに入れたのですが、地域に関わらず、時刻計算する時は UTC に変換してから行った方が良いです。 特にサマータイムのある地域では問題が起こりやすいので、注意が必要ということです。

問題が起こる例

2018年の ニューヨークは 11/4 2:00 am までがサマータイム¹でした。

2018/11/4 2:00 am より前
EDT -04:00

2018/11/4 1:00 am 以降
EST -05:00

このような時刻をまたぐ計算を aware のまま行うと、結果がおかしくなります。

上記の dt_aware から 1日前を計算すると以下のようになります。

ぱっと見正しそうですが、11月3日なのに EST になっていて、間違っています。

以下を見てください。 日本のタイムゾーンが +9:19 になってしまいました。

調べてみると、pytz 2017.2 以降を使う場合、上記のような動作になるようです。

原因については、以下のコメント欄が参考になります。（以下の記事で触れているのは replace でタイムゾーン指定した場合ですが、コンストラクタで指定した場合も同様)

参考

pytzの仕様が変わっている - Qiita

簡単に言うと、「複数のタイムゾーン（UTC オフセット）を持つエリアでは、日付が決まらないとオフセットが決定できないので、 勝手にデフォルトのオフセットが採用される」ということのようです。

一般的に「複数のタイムゾーンを持つエリア」といえば、サマータイムがあるようなエリアで、日本は当てはまらない気がします。 ところが、日本は 1887年以前は今とは異なるタイムゾーン (+09:18:59¹) だったそうです。

参考

一行入魂　PostgreSQLのtime zoneについて

pytz 2017.2 以降はこれを厳密に守るようになったということみたいですね²。

というわけで、aware な datetime オブジェクトを作成するには、 一度 native で作成してから aware に変換するのが正しいやり方のようです。

今回、たまたま日本のタイムゾーンで問題が起こって調べましたが、他のタイムゾーン³では同じ問題が前からあったということですね⁴。

@GNOME 3.28.2

gvfs でいろいろマウントしているとデスクトップがゴチャゴチャになってくる¹ので、アイコンを表示しないように出来ないか調べてみた。

結論から言うと、dconf の /org/gnome/nautilus/desktop/volumes-visible を OFF にすればよい。

Python の mmap は flush() を実行することで変更をディスクに保存します。

この flush([offset[, size]]) を引数つきで呼ぶときは 「offset が mmap.ALLOCATIONGRANULARITY の倍数でないといけない」という制約があります¹。

つまり、以下のように、offset の位置を調整しないといけません。

参考

Issue 32798: mmap.flush() on Linux does not accept the "offset" and "size" args - Python tracker

offset の調整をしないと、OSError が発生してしまいます。

OSError: [Errno 22] Invalid argument

最初、このエラーが発生した時、指定した範囲が不正なんじゃないか等、無駄に調べてしまいました…

「GNOME 3 の設定は dconf という設定管理システムに保存されていて、GSettings はそのラッパー」という程度に理解していたのですが、 Vino の設定をしたり するうちに、理解が深まってきたのでまとめておこうと思います。

参考

First steps with GSettings – GTK+ Development Blog

dconf は設定値を一意に決定する際、schema id と schema path という2種類の文字列を使用します。

schema id は "."（ピリオド）区切りの文字列で、gsettings でキーを指定する際のデフォルトです。 これに対し、schema path は "/"（スラッシュ）区切りの文字列で dconf-editor の上部に表示されています。

先日、dconf を用いて vino を有効にする方法を書いたのですが、これを gsettings を使って出来ないか探ってみました。

参考

Ubuntu 18.04 で Vino を有効にする方法（コマンドラインで）

「Vino の設定は gconftool-2 では出来ない」 に書いたように、Ubuntu 16.04 までは gsettings を用いて Vino を有効に出来ました¹。

しかし、Ubuntu 18.04 では org.gnome.Vino の中に enabled というキーが存在しません。 つまり、先の方法では Vino を有効に出来ません。

以前書いたように dependency_links は Deprecated な状態にありながらも、有効な代替手段がない状態でした。

参考

setup.py に dependency_links を書いても "Could not find a version that satisfies the requirement" が出る場合の対処方法4種 | 穀風

しかし、先日¹ リリースされた pip 18.1 で PEP 508 が実装され dependency_links を使わないで独自のレポジトリを指定できるようになりました。

Ubuntu 18.04 で Python 3.5 系の動作確認をするため¹、ソースコードからビルドしてみました。

qpdf 8.0.2 on Ubuntu 18.04

単純なんだけど、すぐ忘れてしまうので備忘録。

参考

QPDF - TeX Wiki

qpdf 8.0.2 on Ubuntu 18.04

前もやったのにすぐ忘れてしまうので、備忘録。

original_01.pdf, original_02.pdf のように連番のファイルがあるとして、それらを単純に結合して出力する方法。

一部のページを抜き出したりしたい場合は、以下を参照。

参考

QPDF - TeX Wiki

@ Ubuntu 18.04 LTS

Unity のランチャにカスタムアプリを登録する（コマンドラインで） で Ubuntu 16.04 用に書いた方法が Ubuntu 18.04 では少し変更されました。

といっても、gsettings で指定するキーと形式が少し変わっただけです。

Ubuntu 18.04 LTS にアップグレードしたところ workspace の動作がかなり変わってしまいました。 具体的には、左右への移動ができなくなり、マルチディスプレイの場合、プライマリディスプレイのみが移動するようになりました。

Unity から Gnome になったので、この程度の差異は想定内ですが、マルチディスプレイに対応していないのは少し使い勝手が悪いです¹。

「同じように思っている人もいるはず」と思って探してみると、マルチモニタ用のアドオンを作ってくれた人がいたので、紹介します。

なお、動作確認は Gnome 3.28.2 で行っています。

Ubuntu を 18.04 LTS にアップグレードしたところ、Windows マシンへのリモートアクセスが出来なくなってしまいました。

winbind, libnss_wins もインストールしてあるのに。

参考

Winbind をインストールしたのに NetBIOS nameでアクセスできない on Ubuntu 13.10 | 穀風

先に結論を書いておくと、「.desktop ファイルを直接 ~/.local/share/applications 以下に作成するのではなく、desktop-file-install を使用してインストールしましょう。」ということです。

@Remmina 1.2.31.2 on Ubuntu 16.04 LTS

私は最新の Remmina を使用したいため、PPA からインストールしています。

参考

How To Install Remmina Remote Desktop Client in Ubuntu Linux

そのせいかはわかりませんが¹、Windows 10 に RDP 接続すると IME が使えなくなってしまいました。

なお、過去の Remmina では、「英字キーボードになってしまう」という問題がありましたが、最新ではこれは修正されています。 今回、私が遭遇した問題はキーボード配列には関係なく、IME の動作に関しての不具合です。

@Ubuntu 16.04 (Vino 3.8.1-0Ubuntu9.2)

他の Ubuntu マシンからアクセス出来ている Vino に Windows 10 の VNC クライアントからアクセスしてみたのですが、エラーが出てうまくいきませんでした。

@PyCharm 2018.1.4 (Community Edition) on Ubuntu 16.04 64bit

PyCharm はユニットテストファイルを自動的に認識してコンテキストメニューを変化させてくれます。

例えば以下のように main_test.py を作成したとして¹、

右クリック → Run 'Unittests in main_te...'

Python では __getitem__() を実装したクラスは Iterable になります。

参考

PEP 234 -- Iterators | Python.org

@Ubuntu 16.04 LTS

ブラウザベースのオンライン会議サービス appear.in で会議を録音してみました。 ブラウザベースじゃなくても PulseAudio を使っているアプリケーションなら全て録音できると思われます。

Ubuntu 16.04 LTS に Sikuli をインストールしたのでメモ。

Software Update をしたからだと思うのですが¹、突然プリンター（ネットワーク接続）が使用出来なくなりました。

System Settings の Printers を選択すると以下のようなエラーが表示されます。

Printing service not available. Start the service on this computer or connect to another server.

cups サービスが動いていない

確認してみると、cups サービスが起動していない様子。

python2 では signed、python3 では unsigned として扱われる

具体的な例としては以下。

数字は違うのですが、0xF7D18982 を 32bit の signed として扱っているか、unsigned として扱っているかの違いです。

そして、これは仕様のようです。

参考

Issue 4903: binascii.crc32() - document signed vs unsigned results - Python tracker

モニタをつないでいない Ubuntu の Vino に接続する で Vino に繋がるようになったのは良いものの、キーボードレイアウトがおかしいようです¹。 よく考えれば何も設定していないのであたりまえですね。

Ubuntu 18.04 LTS が出ましたね。

メインマシン（16.04 LTS） にアップデート通知がこないなーと思いつつ、 ちょうど仕事が忙しいタイミングと重なって放置していました¹。

しかし、さすがに2週間経ってもこないのはおかしくない？と思って調べてみたら、 16.04 からのアップデートは 18.04.1 が出るまで無効化されているとのこと。

BionicBeaver/ReleaseNotes - Ubuntu Wiki

Upgrades from 16.04 LTS will not be enabled until a few days after 18.04.1's release expected in late July.

18.04.1 のリリーススケジュールは7月後半²。 ちょっと先ですね。 悩ましい。

@Ubuntu 16.04 LTS¹

ImageMagick が heic フォーマット²に対応したようなので、ソースコードからコンパイルしてインストールしてみました。

以下によると、6.9.9 もしくは 7.0.7 以降が対象とのこと。

参考

ImageMagick-6.9.9-34差分 - yoyaのメモ

doctest とは

ここに検索で来られた方には不要かもしれませんが、説明の都合上、簡単に書いておきます。

doctest は、以下のような docstring 内の対話実行例が正しく実行できるか確認するモジュールです。 docstring 内だけでなく、テキストファイルの実行例を確認する事も可能です。

Python で pip install 可能なパッケージを作成した際、 PyPI に登録してしまえば pip が適切に処理してくれるので簡単です。

しかし、内部用のライブラリの場合は明示的にリポジトリの場所を指定しなければなりません。 そのための機能として、setuptools.setup() には dependency_links という引数があります。

ところが、pip install しようとした場合、dependency_links は無視されてしまい、うまくいきません。 dependency_links は、基本的に python setup.py install の場合を想定しているようです。

ただ、pip は setup.py の上位ラッパー¹のはず。 対処方法が無いはずはないと思って調べてみました。

2つのファイルを同時にオープンして、処理が終了したら同時にクローズするような処理¹はよく行われると思うのですが、私は最近まで with をネストして書いていました。

が、Python 2.7 以降は以下のように書けるとのこと。 知らなかった²。。。

参考

How can I open multiple files using "with open" in Python? - Stack Overflow

Python でシンボリックリンクを作成するには os.symlink() を使用します。 ただ、Windows でこれを普通に実行すると OSError: symbolic link privilege not held が発生してしまいます。

以前、Ubuntu 16.04 に wxPython (Python3用) をインストール | 穀風 を書いたのですが、 wxPython 4.0.1 になって微妙に依存関係が変わったようです。

C言語のコードでは、全ての関数プロトタイプ宣言がヘッダファイルに書いてあったりするものもありますが、 個人的にはヘッダファイルに書くべきものと、ソースファイルに書くべき¹ものを明確に区別すべきだと思います。

何をもって区別するのかと言うと、「スコープ」です。 「何を当たり前のことを」と思った方は申し訳ありません。ただ、最近「スコープなんて知らん」と言わんばかりのコードを大量に読むことになってしまいまして。

先日書いた wxPython でパネルを動的追加する方法 | 穀風 を Two Stage Creation を使って実装し直しました。

Two Stage Creation については、以下を参考にしてください

• wxPython Project Phoenix Migration Guide — wxPython Phoenix 4.0.1 documentation
• XRC and two stage creation in Phoenix - Google グループ
• Phoenix compatibility in pywxrc by acolomb · Pull Request #726 · wxWidgets/Phoenix
• wxPython & XRC で Custom Frame を作る方法3種 | 穀風

作成したサンプルは、前回と同様、ラベルとボタンが一つずつあるだけのシンプルなもので、ボタンをクリックすると自パネルの背景が変わるというお遊びつきです¹。

@wxPython 4.0.1 (Phoenix)

UI が複雑になってくると、Custom Frame や Custom Panel を作ってコンポーネント化したくなります。 wxPython では wx.Frame や wx.Panel を継承した class を作ることでこれを実現できますが、どうもコードベースで実装している例が多いようです。

しかし、View は分離しておきたいもの。特に複雑なUIの場合はなおさらです。 そこで、XRC を使って Custom Frame (Panel) を作る方法を調べてみました。

今回は、例として、Button が一つ中央にある Custom Frame を作ってみます¹。

@wxPython 4.0.1

以下のように XRC から wxDatePickerCtrl 等のコンポーネントを生成すると、Control オブジェクトが返ってきてしまうことがあります。

Add Panel ボタンをクリックすると動的に MyPanel を追加するサンプルを作りました。

MyPanel はラベルとボタンが一つずつあるだけのシンプルなもので、ボタンをクリックすると自パネルの背景が変わるというお遊びつきです¹。

なお、MyPanel は wxPython & XRC で Custom Frame を作る方法2種＋α | 穀風 で紹介した方法で XRC から生成しています²。

@wxPython 4.0.1 (Phoenix)

UI が複雑になってくると、Custom Frame や Custom Panel を作ってコンポーネント化したくなります。 wxPython では wx.Frame や wx.Panel を継承した class を作ることでこれを実現できますが、どうもコードベースで実装している例が多いようです。

しかし、View は分離しておきたいもの。特に複雑なUIの場合はなおさらです。 そこで、XRC を使って Custom Frame (Panel) を作る方法を調べてみました。

今回は、例として、Button が一つ中央にある Custom Frame を作ってみます¹。

SetBackgroundColour¹ の引数に文字列や Colour オブジェクトを指定している例はよく見かけるのですが、RGB でしたい時はどうするのだろうと思っていました。

Android の android.graphics.Paint にはテキストサイズ計測用のメソッドが２つ用意されています。 Paint#measureText(String) と Paint#getTextBounds(String, int, int, Rect) ですが、これらの違いを調べてみました。

@Java 1.8.0

ZipInputStream から取得した ZipEntry の getSize() は -1 になることがあります。

@play-services-maps:11.8.0

@Ubuntu 16.04 LTS

Vino はそもそも画面をミラーリングするアプリケーションなので、画面出力をしていないマシンにつなぐことは出来ません。

しかし、バックグラウンドで GUI アプリケーションを動かしておきたい場合、モニタ無しで VNC 接続したいこともあります。 そんな時は、ダミーのグラフィックドライバをインストールすることで接続出来るようになります。

参考

Vino - ArchWiki

以前はデフォルトで使えたと思うのだけど、いつの間にかデフォルトオフになっていたのでメモ。

このご時世にシリアル通信というのも何ですが、組み込み関係等では現役だったりします¹。

私は Linux 上の screen をよく使います。ただ、諸事情により Windows で開発しなければならない場合もあります。

そんな時は、Tera Term を使っていたのですが、Windows 10 では Linux が動くようになったので、Windows 10 上でも screen が動くか試してみました。

Android Studio を使っていると Gradle plugin のアップデートを勧められることがあります。その際、"Don't remind me again for this project" を押してしまうと、2度とこのダイアログが出なくなってしまいます。

既存の Android プロジェクトを Android Studio 3.0.1 で読み込んだところ、 Android Studio ではビルド出来るのに、コマンドラインでは以下のようなエラーが出るようになってしまいました。

Ubuntu 16.04 LTS 上で VDI を Raw Disk Image に変換したもので確認。

参考

• filesystems - how to find the type of img file and mount it - Unix & Linux Stack Exchange
• Convert .vdi to .img · GitHub

いつの間にか¹、公式に Google Play がインストールされた Emulator が出ていたようです。

参考

Android Studio Release Updates: Google Play System Images: Android Studio 2.3.2 and Emulator 26.0.2 are now available in the Beta Channel

Google Play Store の国情報を変えるには Google ペイメントセンター で新しいプロファイルを作成すれば良い。 という情報は各所で見られます。 ただ、私がその設定をして丸2日待っても情報が反映される様子がありませんでした。

何度アプリを起動しても、「このアイテムはお住まいの国でご利用いただけません」と表示されてしまいます。

.desktop ファイルを desktop-file-install でインストールすると、Unity の検索に出てくるようになります。

参考

Unity のランチャにカスタムアプリを登録する（コマンドラインで） | 穀風

インストール

@ Ubuntu 16.04 LTS

もうすぐ Ubuntu 18.04 LTS が出るであろうこのタイミングで Unity の設定について書こうと思います¹。

「ランチャにドラッグ＆ドロップ」ではなく、全部コマンドラインでやる方法です。

AOSP の設定に TARGET_BUILD_TYPE という項目があるけど、既に deprecated らしい。 確かに使ったことないな。

その割に、最新のコードでも残ってるし、deprecated のコメントも無いのが気になるところ。

久しぶりに Android の Emulator を起動したら起動はするものの、黒い画面のままフリーズし、そのうち落ちてしまうようになってしまいました。

以下のように2段階の処理で可能¹

pkcs12 キーストアファイルに登録

以下のようにして、pkcs12 形式のキーストアファイルに登録する。

-name platform は省略可能。省略すると 1 というエイリアスになる。

pkcs12 を jks キーストアにインポートする

-alias と -destalias は省略可能。

AOSP をビルドする際、デフォルトだと署名には build/target/product/security/ 以下にある testkey.x509.pem と testkey.pk8 が使われます。 しかし、実際にリリースするデバイスには自分の署名を使うべきです。