[AWS][RDS] PostgreSQL 11 が 2024-03-01 より自動的に「Amazon RDS Extended Support」へ加入される件について

HIROKO-M commented 2 weeks ago

お世話になっております。

弊社でAWSのPostgreSQL 11対応終了のお知らせを検知致しました。バージョンを更新しない場合、2024/03/01 より自動的に「Amazon RDS Extended Support」へ加入されることになります。

弊社として、PostgreSQL バージョンアップをおすすめ致しますご判断をお願い致します。

状況

現在アフィリエイトフレンズシステムで稼働中データベースが4台あります。

![image][pasted-2024.02.01-14.30.55.png]

「Amazon RDS Extended Support」へ加入する場合、$345,6 / 月となる想定です。　・db.t2.micro：0.120$ × 2(vCPU) × 24時間 × 30日 = 172,8 $ / 月　・db.t2.medium：0.120$ × 2(vCPU) × 24時間 × 30日 = 172,8 $ / 月（1台当たりmicroは1vCPU、mediumは2vCPU） ※料金計算をこちらにご参照ください。

【料金計算】上記料金が2024/04/01から発生します。　（「Amazon RDS Extended Support」加入後、バージョンアップ対応のために2024/03/01～2024/03/31は無料期間になります）

作業予定

PostgreSQLの最適バージョンを調査
対応工数算出
スケジュール作成
御社合意後に作業開始

以上ご報告させて頂きます。ご確認・ご判断をよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼

お世話になります。ご確認ありがとうございます。

ただし、他にデータ問題がないことを見て、本件の影響で発生したわけではないと判断しました。

従って、集計レポートでデータ不一致の件を別タスク（AFFILIATE_FRIENDS-2073）で調査・対応させて頂き、他に問題なければ、本件を終了とさせて頂きたいと思いますが、よろしいでしょうか？

はい、承知いたしました。本件はクローズで問題ございませんので、ステータスを「完了」とさせていただきます。

別途、集計レポートでデータ不一致の件は、引き続きよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お世話になっております。

上記データ不一致の件、弊社でも事象確認できました。ただし、他にデータ問題がないことを見て、本件の影響で発生したわけではないと判断しました。

従って、集計レポートでデータ不一致の件を別タスク（AFFILIATE_FRIENDS-2073）で調査・対応させて頂き、他に問題なければ、本件を終了とさせて頂きたいと思いますが、よろしいでしょうか？

ご迷惑をお掛けしてしまい申し訳ございませんが、ご確認のほどよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。上記ご連絡およびデータの再取得をありがとうございます。

本番環境にて、以下確認を行いました。

管理画面 > 集計レポートの検証

・管理画面 > 集計レポートを開き、以下会員の成果レポート集計を確認しました。　会員ID：3241（jimukyoku@affiliate-friends.co.jp）　基準日：発生日　レポート種別：成果レポート集計　レポート期間：(1) 2024-02-01～2024-02-29 　レポート期間：(2) 2024-01-01～2024-01-31 　承認状態：未確定、承認、却下

結果

(1)レポート期間：2024-02-01～2024-02-29 の結果は、　会員サイトの成果別レポートと数値を比較して期待通りの数値になっていることを確認できました。

(2)レポート期間：2024-01-01～2024-01-31 の結果は、　会員サイトの成果別レポートと数値を比較して、一部数値に差異があります。それぞれのファイルを添付しますのでご確認ください。　・集計レポート結果：Summaryreport_result_20240322135436.csv 　・会員サイトの成果別レポート結果：order_report (1).csv

　　ASP：バリューコマース
　　案件ID：2101957
　　サイト名：リアルコスメ
　　成果件数：49
　　成果報酬： 77129   ⇒ 会員サイトの成果別レポート結果では、 72179

　　ASP：バリューコマース
　　案件ID：2114677
　　サイト名：リアルコスメ
　　成果件数：83
　　成果報酬： 297000  ⇒ 会員サイトの成果別レポート結果では、 272250

　　ASP：バリューコマース
　　案件ID：2114677
　　サイト名：リアルコスメ
　　成果件数：19
　　成果報酬： 79200   ⇒ 会員サイトの成果別レポート結果では、 70400

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 cc@君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お世話になっております。

只今、ASP アクセストレードのDOM構成更新作業を対応完了し、本番環境で反映完了し、下記データを再度取得致しました。

日別ランキング
- 03/14～03/20
月別ランキング
- 04/2023
- 01/2024
- 02/2024
集計レポート
- 01/2024
- 02/2024

お手数をおかけいたしますが、ご確認のほどよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。ご返信が大変遅くなりまして申し訳ございません。

(2)、(3) に対して、アクセストレードのDOM構成変更の対応後再度データ取得いただけるとのこと承知しました。引き続き、何卒よろしくお願い申し上げます。

(1) について、STG環境で問題ないことを確認できましたので、引き続き、本番環境への反映をお願いいたします。いかにもコメントを追記させていただきました。 https://fujitech.backlog.jp/view/AFFILIATE_FRIENDS-2071#comment-223027651

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お疲れ様です。

上記のパスワード変更をご対応頂きありがとうございます。弊社で確認し、バッチを再度実行いたしました。

ただし、今回は ASP アクセストレードのDOM構成変更でバッチ実行がエラーになっております。よって、DOM構成変更を別チケットで対応させて頂き、再度データを取得させて頂きます。

・[2024-03-15] ASP アクセストレードのDOM構成を更新 https://fujitech.backlog.jp/view/AFFILIATE_FRIENDS-2072

また、上記フィードバック (1) について、対応工数を確認すると連絡させて頂きましたが、開発はできたようですので、STG環境まで反映させて頂きました。 STG環境でご確認いただき、動作に問題なければ本番環境に反映させて頂きます。

・月別レポートが結果を表示できない https://fujitech.backlog.jp/view/AFFILIATE_FRIENDS-2071#comment-222868077

ご迷惑をお掛け致しますが、以上ご確認のほどよろしくお願いします。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。ご迷惑をおかけし申し訳ございません。

バリューコマースの定期パスワード変更要件に従いパスワードを以下に変更しました。

Q+VO4y09%T12

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お疲れ様です。

上記フィードバック (2)、(3) に対して、再度ランキング・集計レポートバッチを実行させて頂きました。

ただし、バッチ実行後に確認したところ、jimukyoku@アカウントに連携したバリューコマースアカウントに接続エラーが発生することで正確な数値を取得できませんでした。また、ASPへの接続がエラーになっているため、各レポートにも数値が正確に取得できていない状態です。

確認したところ、接続エラーの原因はバリューコマースの方針でパスワードが再設定することが必要になります。

![image][pasted-2024.03.13-18.11.52.png]

正確な数値の取得、確認するため、ご確認頂き、バリューコマースへのアクセスを再設定して頂けますでしょうか？

ご迷惑をお掛けしますが、どうぞよろしくお願い致します。

HIROKO-M commented 2 weeks ago

コメントなし

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。上記ご連絡をいただきましてありがとうございます。

内容承知しました。 (2)、(3)に関してはデータ更新をお願いいたします。 (1)については、エラー原因の調査中ということでまだ不明点があるかと思いますが、対応工数としてどれほどかかる見込みでしょうか？

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お世話になっております。

上記ご確認頂いた内容を弊社で確認させていただきました。結果として、3件とも今回のPostgreSQLアップグレード対応に関係がないと結論いたしました。

　(2).、(3). に関して、2月18日に実行されたバッチ処理に特に問題がなく、仰る通り、成果承認後にデータ取得の更新がされていないようです。

　(1). に関して、ログを確認したところ、ASP Rentrack によりエラー504が返却され、レポート結果が取得できませんでした。　エラーの原因について、引き続き調査が必要と思いますが、保守タスクとして対応させて頂きます。

また、ASP Rentrack のエラー504に関しまして、実際の保守作業が3月末までと聞いております。弊社の方でも調整させて頂きますので、対応のご希望についてお伺いしてもよろしいでしょうか？

以上、ご報告させて頂きます。ご確認のほどよろしくお願いします。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。ご連絡が遅くなりまして申し訳ございません。本番環境にて挙動の確認、データの確認を行いました。

以下は期待する挙動になっていることを確認しました。

・会員サイトで各種レポートの挙動および数値を検証し、月別レポート以外で問題ないことを確認しました。・会員サイトで案件の単価比較、特単ページを検証し、期待する案件が表示されることを確認しました。・管理画面で会員や特単の設定ページの挙動は特に問題ありませんでした。

以下は期待する挙動と異なっていた点でです。

(1). 月別レポートでレポート期間を単月ではなく、「2023年8月～2024年1月」としたり、「直近12ヶ月」とした場合に、データ取得ができず「レポートデータが存在しません。条件を指定しなおしてください。」のメッセージが表示されます。

(2). 会員サイトでランキングの報酬額の推移で「月別承認報酬」の2024年1月と2023年4月の数値が月別レポートの結果と差異があります。（日別発生報酬と日別レポートの数値は一致しています。）

![image][ランキング.png]

(3). 管理画面 > 集計レポートで、レポート期間を1月にして数値を確認したところ、バリューコマースの「成果報酬」が会員サイトの成果別レポート結果と差異がありました。詳細は添付ファイル（Summaryreport_result_1月成果レポート.csv）をご確認ください。数値に差異がある項目を赤字で示しています。

▼条件
・会員ID　3241　（jimukyoku@アカウントのIDです）
・基準日　発生日
・レポート種別　成果レポート集計
・レポート期間　2024-01-01～2024-01-31
・承認状態　 未確定  承認  却下

(2)と(3)は、成果承認後にデータ取得の更新がされていない可能性があるのかなと推測しています。データ取得の更新のタイミングを教えてください。

ご確認のほど、よろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。上記詳細なご報告と迅速なご対応ありがとうございます。

https://fujitech.backlog.jp/view/AFFILIATE_FRIENDS-2068#comment-221295487 上記でご報告させていただいた不具合がすべて解消されていることをSTG環境で確認いたしました。

他は特に問題を見つけられませんでしたので予定通り本番環境への反映をお願いいたします。

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子
cc @君野翼@Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) 上記3件の不具合と別で、ご確認させて頂きますが、以前ご連絡させて頂いた通り、3/8（金）12:00～13:00 に本チケットを本番環境に反映しようと思っておりますが、上記時間に作業を進んでもよろしいでしょうか？

お手数をおかけしますが、ご確認のほどよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お世話になっております。

上記にご連絡頂いた不具合について、弊社で確認とさせて頂きました。 3件とも今回のPostgreSQLバージョンアップにより発生した不具合ではないことを分かりました。以下ご説明させて頂きます。

1) 【月別レポート】、【お支払履歴】ページを開いたときのレポート期間が、　デフォルト直近3ヶ月ではなく、さらにその前の3ヶ月（2023/10-12月）となっていました。

Stg環境での時間がキャッシュで最新に更新せらなく、直近3ヶ月の期間を誤認していました。こちらの件はStg環境でのみ発生し、開発・本番環境では発生しませんでした。 → キャッシュを削除し、最新に更新致しました。　現状、Stg環境で月別レポート、お支払い履歴のデフォルトレポート期間を直近3ヶ月になりました。

![image][pasted-2024.03.06-17.39.59.png] ![image][pasted-2024.03.06-17.40.25.png]

2)【お支払履歴】ページにおいて、レポート期間を「2023年10月」と指定した際　JANetの数値が本番環境と異なります。

Stg環境で Lambda作成時にエラーが発生され、ASP JANet にのみデータを取得できませんでした。こちらの件はStg環境でのみ発生し、開発環境・本番環境では発生しておりません。 → Stg環境の ASP JANet Lambdaを再作成しました。　現状、本番環境と一致するデータを取得できております。

![image][pasted-2024.03.06-17.47.15.png]

3) 案件の単価比較をする A8.netの案件が表示されるときとされない時があります。※この問題は本番環境でも同様の事象を見つけました。例）キーワードに「ETVOS」と入力　※A8.netのASP管理画面でみると、該当案件が5件あります。

連続的にログインリクエストするとA8.netにブロックされ、案件データを取得できない事象になります。 → ログインをブロックされないように、ASP A8.net に対して、リクエスト処理時間を延長しました。　現状、Stg環境では「ETVOS」で連続に10回検索し、全10回に検索結果を表示しております。

![image][pasted-2024.03.06-18.04.19.png]

以上、3件の不具合をStg環境で修正完了しましたので、再度ご確認お願い致します。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。 STG環境で一通りのページ（各種レポートや特単等のがっちゃん以外のページ、管理画面ページなど）を本番環境の挙動と比較しながら確認しました。

※管理画面の集計レポートについては、どのタイミングまでの集計がSTG環境でされているかが不明でしたので、厳密に数値確認までは行っておりません。

1) 【月別レポート】、【お支払履歴】ページを開いたときのレポート期間が、　デフォルト直近3ヶ月ではなく、さらにその前の3ヶ月（2023/10-12月）となっていました。

![image][1_月別レポート.png]

2)【お支払履歴】ページにおいて、レポート期間を「2023年10月」と指定した際　JANetの数値が本番環境と異なります。　　本番環境：3,960円　　STG環境：未記載

![image][支払い履歴.png]

3) 案件の単価比較をする A8.netの案件が表示されるときとされない時があります。※この問題は本番環境でも同様の事象を見つけました。例）キーワードに「ETVOS」と入力　※A8.netのASP管理画面でみると、該当案件が5件あります。

![image][3_案件の単価比較.png]

その他は特に問題ないかと思いました。上記ご確認のほど、よろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 @君野翼 cc @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Giang Nguyen Thi Kim (Bee Tech - Comtor) お世話になっております。

本件において、開発・Stg環境リグレッションテストが完了しました。御社にもStg環境でご確認お願い致します。

御社の確認で特に問題がなかった場合、下記スケジュールで本番環境へ反映させて頂きたいと思います。 3/8（金）12:00～13:00 ※作業中、本番環境へのアクセスが不安定になる可能性がありますので、　他にご希望がありましたら、調整させて頂きます。

以上ご連絡させて頂きます。どうぞよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Toru Kaneko（Bee Tech） @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼

お世話になります。上記情報を共有いただきましてありがとうございます。

作業工数、金額、サービス利用費用のいずれも変更はありません。

開発費用・工数および運用にかかわるサービス利用料金に変更がないということであれば、特に問題ございませんので、引き続き進めていただきたいと存じます。

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 @君野翼 cc@Toru Kaneko（Bee Tech） @Thao Do Thi Phuong (Bee Tech - QC Manager) @Manh Pham Van (Bee Tech - Dev Manager) いつもお世話になっております。 PostgreSQLアップデート対応に伴い、ご報告させて頂きます。

PostgreSQL 14へアップグレードするため、PostgreSQLのインスタンスタイプもアップグレードが必要であることが分かりました。作業工数、金額、サービス利用費用のいずれも変更はありません。

![image][pasted-2024.02.21-13.56.19.png]

・開発環境とステージング環境：　　　　・変更前：db.t2.micro 　　　　・変更後： db.t3.micro ・本番環境：　　　　・変更前：db.t2.medium 　　　　・変更後： db.t3.medium

どうぞよろしくお願い致します。

HIROKO-M commented 2 weeks ago

@松田寛子さん @君野翼さんいつもお世話になっております。

掲題作業について、お見積りをチャットワークでお送りさせて頂きました。お手数をお掛け致しますが、ご確認の程宜しくお願い致します。 https://www.chatwork.com/#!rid210393662-1807092968822145024

引き続き何卒宜しくお願い致します。

HIROKO-M commented 2 weeks ago

コメントなし

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。上記スケジュールの共有をありがとうございます。

AFFILIATE_FRIENDS-2066 よりも先にご対応いただくということ含め、承知しました。

引き続き、よろしくお願いいたします。

HIROKO-M commented 2 weeks ago

@松田寛子 @君野翼 cc @Toru Kaneko（Bee Tech） @Manh Pham Van (Bee Tech - Dev Manager) @Vuong Do Quang (Bee Tech - Dev Manager)@Thao Do Thi Phuong (Bee Tech - QC Manager) @Giang Nguyen Thi Kim (Bee Tech - Comtor) お疲れ様です。

本件において、工数算出・スケジュール作成が完了致しました。

対応工数に関して、別途ご連絡させて頂きますが、弊社の想定スケジュールは下記のようになります。（2024/03/01～2024/03/31は無料期間であるため、対応可能期間を3/31までと判断しております）・2024/02/19 - 2024/02/27：開発完了・2024/02/28 - 2024/03/05：STG環境リグレッションテスト完了・2024/03/06 - 2024/03/12：御社確認、フィードバック対応・2024/03/13：本番環境に反映

また、本件の緊急性（追加費用が発生しないために4/1までに対応）により、ランキング問題の対応より優先度が高いと考え、AFFILIATE_FRIENDS-2066 のスケジュールを下記のように調整させて頂きます。・2024/03/20 開発完了、STG環境反映・2024/03/27 STG環境モニタリング終了（1週間予定）・2024/03/28以降、1ヶ月程モニタリング予定

以上、ご確認のほどよろしくお願い致します。

HIROKO-M commented 2 weeks ago

コメントなし

HIROKO-M commented 2 weeks ago

@Kien Bui Hoang (Bee Tech - Comtor) cc @Giang Nguyen Thi Kim (Bee Tech - Comtor) @Manh Pham Van (Bee Tech - Dev Manager) @Thao Do Thi Phuong (Bee Tech - QC Manager) @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) @君野翼お世話になります。ご提示いただいた内容を社内で検討しまして、「Amazon RDS Extended Support」へ加入するのではなく PostgreSQL バージョンアップでご対応をお願いしたいと存じます。

PostgreSQLの最適バージョンを調査対応工数算出スケジュール作成御社合意後に作業開始

上記が分かりましたら、お手数ですが再度ご連絡いただけますようお願いいたします。

どうぞよろしくお願いいたします。

HIROKO-M commented 2 weeks ago

コメントなし

HIROKO-M commented 2 weeks ago

@松田寛子 cc @君野翼 @Toru Kaneko（Bee Tech） @Vuong Do Quang (Bee Tech - Dev Manager) お世話になっております。

上記の説明不足で申し訳ございませんでした。「Amazon RDS Extended Support」が追加サポートプランであるため、RDS とは別料金になっております。よって、「Amazon RDS Extended Support」へ加入する場合、利用料金は $274.4～$283 + $345,6 = $628,6 / 月となります。

PostgreSQL バージョンアップした場合、追加料金が発生しなく、現在と同様の金額（$274.4～$283 / 月）になります。

以上、ご報告させて頂きます。

HIROKO-M / Test_002