wheel build の並列化

[ikanago]

wheel build を Python のバージョンごとに並列化したいです．可能かどうかはまだ確かめていません．

[ikanago]

Python3.6 は security release も終了するのでリリースから外してもよさそうです

We plan to provide security fixes for Python 3.6 as needed through 2021, five years following its initial release.

https://www.python.org/downloads/release/python-3615/ https://endoflife.date/python

[ikanago]

バージョンごとにビルドを並列化するのは問題ないですが，アップロードを並列化するとビルドに失敗したバージョンだけが公開されない状態になる場合があります。 actions/upload-artifact と actions/download-artifact でうまく同期する必要がありそうです。 あるいは，アップロード時には直列ビルド，それ以外のときは並列ビルドだけして結果は破棄，とすればシンプルになります．

[ikanago]

ただ，cibuildwheel がバージョンごとの並列ビルドをサポートしていなさそうなので CIBW_BUILD を matrix で変えてやるしかないんですが，これをやるとアップロード時だけ直列でやるというのが面倒そうなんですよね...(さすがにアップロード時とそれ以外でジョブを2つ書くのはだるいし)

[kotamanegi]

CIBW_BUILDの値は更新されるので、新しいバージョンが出た場合は管理が必要になり面倒です。 wheelを高速化する方向性の方が筋が良いと感じたのですがどうでしょうか？

[ikanago]

ややこしくなるだけですね... ubuntu と mac のほうに ccache を入れて改善できるか試してみます

[ikanago]

cibuildwheel が起動するコンテナの中にキャッシュができるはずで，これを取り出すのが難しそうです

[kotamanegi]

Done in https://github.com/qulacs/qulacs/pull/395