skotani-db / openhack2024

MIT License
3 stars 3 forks source link

01_medallion_architectureのCell66にてSQLSTATE: 42704 #7

Closed yuharucan closed 2 months ago

yuharucan commented 2 months ago

01_medallion_architecture の Cell66 にて SQLSTATE: 42704 が発生します。

01_medallion_architecture_cell65_error

manabian- commented 2 months ago

PySpark にて select メソッドと withcolumn メソッドを続けて利用するとスキーマが喪失する事象を確認。通常のクラスターでは実施できていたのでサーバーレスのバグの可能性あり。

image

manabian- commented 2 months ago

分割して記述すことで動作したため、本対応を実施することとする。

image

manabian- commented 2 months ago

対応済み