nokoxxx1212
commented
5 months ago Vertex AI Notebooks環境構築
- インスタンス作成
- dev-kh-wb-01
- e2-standard-2
- バージョンを指定する（みんな揃える）
- アイドル状態でのシャットダウン
- 外部 IP アドレスを割り当て プロキシ アクセスを許可 OFF
- iam.serviceAccounts.actAs を持つすべてのユーザーがインスタンスのアカウントにアクセスできます or シングルユーザ
- Cloud Monitoring をインストールする
- コストはminで$100/月とか？
- ログイン。gcloud compute --project "keiba-hacke" ssh --zone "us-central1-a" "dev-kh-wb-01" -- -L 8080:localhost:8080
- External IP address was not found; defaulting to using IAP tunneling.（問題なし）
- -> sshログインはできるが8080アクセスできず
- logみるがわからず
- 手動は91とかで作る。その後tfで01
- 1度手動で作ってからtfに起こすのが良い
- Allow proxy accessとかExternalもチェック
- -> 綺麗に立ち上がったぽい。ステータスがOK。sshでなくブラウザからもアクセスできる
- Terraformコード化
- -> An argument named "idle_shutdown_timeout" is not expected here.
- 対応していないやつもある。手動の管理どうするか
- -> Error: Error waiting to create Instance: Error waiting for Creating Instance: Error code 5, message: The resource 'projects/keiba-hacke/global/images/family/tf-latest-cpu' was not found。シングルユーザログインも設定できていない？
- varを整備する前にplanするのが良い？
- -> resource "google_notebooks_instance" "instance" {はuser-managedだった
- -> image_familyとか指定しないが、何になっている？
- -> The provider hashicorp/google does not support resource type "google_workbench_instance".
- Google Cloud SDK (gcloud)を使用する：Terraformの外部でgcloudコマンドを使用してリソースを作成し、その後Terraformで管理します。Terraformのexternalデータソースを使用してgcloudコマンドの出力を取得することもできます。（今回はやらない）
- https://registry.terraform.io/providers/hashicorp/google/latest を見れば対応しているかわかる？
- 12/12にマージされたぽい。バージョンはコンソールから確認できる
- lockファイルを消した
- Terraformの公式ぺーじを見ながら整えた（Gitで見かけたやつとかは、対応していない項目があった）
学び
- Vertex AI Workbenchでは、カスタムイメージを作成して使用することが可能。コンテナイメージを指定する？->インスタンスはなさそう？VAPで揃えるしかないか
- バージョンアップ運用どうするか
- Terraform fmtとか、できればplanもローカルでやりたい？->pushするだけで実行されるし残るからいいか？
- インフラも試行錯誤できる環境必要。人ごとに一環境？
- 手動で91とかを最初に作ってから、tf化。tfもvariableとか作り込まずまず通す
- 新しいサービスは、対応しているかチェック。changelogとか。どうしてもまだ対応していなかったらexternalデータソースとか
- プロバイダのバージョンもチェック。TerraformCloudから確認できる
- ネットワーク周りは要確認。IAP tunnelingとか
- Workbenchインスタンスはシングルユーザの設定
- WorkbenchインスタンスはGitとかBQとか便利
- スケジューリング実行もできそう
- variableは、Cloudに設定するやつはコメントアウト
🧑 Story
🔨 Acceptance Criteria
📝 Task List
📚 Resources
🎯 Deliverables
🔜 Remaining Tasks