最善手・スコア等のデータをHerokuのデータベースに保存する

Heroku Postgres アドオンを追加
- heroku pg:psql で psql コマンドがないというエラー
PostgreSQL 16.2 をダウンロード・インストール
- スタックビルダはインストールしなかった (今回は不要)
手動で PATH を通した (システム環境変数に追加)
- psql コマンドが通ることを確認
(vscodeを再起動してから) heroku pg:psql → データベースに接続できた
テーブル作成 (セミコロンを忘れずに入れる。CREATE TABLE と出たらOK)

CREATE TABLE data3 (
    board CHAR(15) PRIMARY KEY,
    score INTEGER,
    x INTEGER,
    y INTEGER
);

データをインポート
- Python スクリプトで1件ずつ追加する方法と、csvに変換して追加する方法があるらしい
- 後者だとjson・csv・heroku上のデータの3つが存在してしまいデータ更新時に同期を取りにくいため、前者を試したが、insert100件で19秒かかった。全データには数十時間かかる計算のため、この方法はやめた。
- csvに変換して追加する場合、chatgptに「ローカルからは追加できず一度クラウドストレージなどにあげる」よう言われたが、ローカルからできる [1] (chatgptはこの辺りは詳しくないらしいので注意)
- data_json_to_csv.py で data_3.csv に変換 (スクリプトは #6 で追加)
- heroku pg:psql のCLIで \copy data3 (board, score, x, y) from 'data_3.csv' with csv すればよい (1分以内に完了した)
- プラグイン data-cli や data のインストールは不要 (heroku plugins:install (プラグイン名) でできるが、前者を入れたら Plugin data-cli: Error: Cannot find module 'C:\Users\ユーザ名\AppData\Local\heroku\node_modules\data-cli\lib\index.js' とエラーになり、heroku update でも解決しなかったのでアンインストールした)
- Google Cloud Storage へのアップロード (今回は不要だった)
  - プロジェクト tsumego-mini のバケット score-xy-data に data_3.csv をアップロード
  - バケット自体を公開アクセスにした (allUsers に閲覧権限を付与) [2]
実装: #6
Herokuで確認
- デバッグしたときはクリック→相手の石表示に1～1.5秒くらいかかっていたが、なぜかデプロイ後は0.2～0.3秒くらいになっていたので、高速化は問題なさそう

CREATE TABLE filtered_init_boards (
    num INTEGER PRIMARY KEY,
    board CHAR(9)
);

\copy filtered_init_boards (num, board) from 'filtered_init_boards.csv' with csv

参考

https://chatgpt.com/c/eb117357-cce7-483a-ba4e-171f895503e3
- 「クリックで石を置いた際に、その座標によって、事前にherokuのsqlデータベースに保存していたデータに基づいて、メッセージを表示するようにしたいです。データの元となるファイルはjsonで用意できています。詳細な手順を教えてください。」以降
[1] https://qiita.com/EisKern/items/611934bb2f0f87e4f410#csv%E3%83%95%E3%82%A1%E3%82%A4%E3%83%AB%E3%81%8B%E3%82%89%E3%83%AC%E3%82%B3%E3%83%BC%E3%83%89%E3%81%AE%E8%BF%BD%E5%8A%A0-1
[2] https://chatgpt.com/c/21a12de1-b674-4434-8eae-18a228c056d0

tomii9273 / tsumego_mini

最善手・スコア等のデータをHerokuのデータベースに保存する #5

WHY

WHAT

参考