クラウドストレージ利用検証

[itutu-tienday]

技術検証（S3関連）

• [x] snakemake S3 利用検証
  • Input/Outputがシンプルな構成であれば、 snakemake の標準機能での対応が可 （optinistでは恐らく機能の拡張が必要）
  • https://snakemake.readthedocs.io/en/v7.31.1/snakefiles/remote_files.html
• [x] s3fs-fuse 検証
  • [x] Docker環境での利用検証
  • → 権限付与（capabilitiesなど）により動作OK
  • [x] ECS環境での利用検証

設計

• [x] Pattern 1. s3fs-fuse
• [x] Pattern 2. snakemake S3アクセス機能利用
• [x] Pattern 3. ローカルストレージとS3のデータ同期方式

[itutu-tienday]

当初の調査完了、以下の方式での対応を想定し、設計/実装を進行

• Pattern 3. ローカルストレージとS3のデータ同期方式

[itutu-tienday]

当初の調査完了、以下の方式での対応を想定し、設計/実装を進行

• Pattern 3. ローカルストレージとS3のデータ同期方式