search

openego / data_processing

(geo)data processing, database setup, data validation
GNU Affero General Public License v3.0
7 stars 5 forks source link

there is no DP preprocessing BPMN documentation about supply tables #335

Open gplssm opened 4 years ago

gplssm commented 4 years ago

Provide BPMN decribing importand preprocessing of power plant and feedin data, more precisely these tables

gplssm commented 4 years ago

I added everything I know in #337

Following question came up while scanning the SQL scripts in preprocessing

Tabelle/Skript Frage
preprocessing/sql_snippets/ego_simple-feedin_per_scenario.sql Wird das noch benötigt oder erledigt das simple_feedin.py?
preprocessing/sql_snippets/ego_weather_points_per_scenario.sql Es scheint so, als wenn simple_feedin.py auch das erledigt
model_draft.ego_supply_res_powerplant Woher kommt die Tabelle ursprünglich? Wie wird sie importiert? Welche initialen Daten werden benötigt?
model_draft.ego_supply_conv_powerplant Woher kommt die Tabelle ursprünglich? Wie wird sie importiert? Welche initialen Daten werden benötigt?
supply_ego_renewable_power_plants_germany.sql erstellt die Tabelle supply.ego_renewable_powerplant Die erstellte Tabelle scheint nicht mehr verwendet zu werden
IlkaCu commented 4 years ago

This issue also includes table model_draft.ego_power_class

IlkaCu commented 4 years ago
Tabelle/Skript Frage Antworten/Hinweise
preprocessing/sql_snippets/ego_simple-feedin_per_scenario.sql Wird das noch benötigt oder erledigt das simple_feedin.py? Skript erstellt die Tabelle model_draft.ego_neighbours_offshore_point welche in ego_dp_powerflow_timeseries_generator.sql verwendet wird.
preprocessing/sql_snippets/ego_weather_points_per_scenario.sql Es scheint so, als wenn simple_feedin.py auch das erledigt Nein, simple_feedin.py erstellt nur model_draft.ego_renewable_feedin und model_draft.ego_power_class
model_draft.ego_supply_res_powerplant Woher kommt die Tabelle ursprünglich? Wie wird sie importiert? Welche initialen Daten werden benötigt? ...
model_draft.ego_supply_conv_powerplant Woher kommt die Tabelle ursprünglich? Wie wird sie importiert? Welche initialen Daten werden benötigt? ...
supply_ego_renewable_power_plants_germany.sql erstellt die Tabelle supply.ego_renewable_powerplant Die erstellte Tabelle scheint nicht mehr verwendet zu werden supply.ego_renewable_powerplant scheint die Ausgangstabelle für model_draft.ego_supply_res_powerplant zu sein.
model_draft.ego_supply_renewable_bnetza_full_attribute & model_draft.bnetza_eeg_anlagenstammdaten_wind_classification Wo kommen diese Tabellen her? Metadaten fehlen ebenfalls. ...
utility/ego_dp_preprocessing_conv_powerplant_2035.sql Skript liegt im utility Ordner, sollte also eigentlich nicht verwendet werden, erstellt aber Tabelle model_draft.ego_supply_conv_powerplant_2035 welche in ego_dp_conv_by_scenario verwendet wird. Genauere Prüfung der Skriptinhalte nötig. ...
gplssm commented 4 years ago

@IlkaCu can you tell me which of the tables that are present in the BPMN I should make available as dump for initial import in #339 ? I had in mind

but since you last update I'm unsure..

IlkaCu commented 4 years ago

For the section 'supply' we unfortunately need dumps for a few tables: supply.ego_conventional_powerplant supply.ego_renewable_powerplant model_draft.ego_supply_renewable_bnetza_full_attribute model_draft.bnetza_eeganlagenstammdaten_wind_classification climate.cosmoclmgrid model_draft.ego_small_chp_plant_germany