ondata / disabled-data

Other
1 stars 1 forks source link

Estrazione ulteriori variabili release del 12 Ottobre #11

Closed simonabisiani closed 2 years ago

simonabisiani commented 2 years ago

Ciao @aborruso, sono finalmente al lavoro per la release di Ottobre che includerà tutte le tematiche rimanenti.

Come già visto nella prima release nel caso di sesso ed età, su Disabilitàincifre ci sono ulteriori variabili nelle varie tabelle che, se di interesse, vanno estratte manualmente/su richiesta.

Andando per tematica, vorrei mandarti le mie rimanenti richieste; così da mandarti poche richieste alla volta. Se preferisci che compili tutte le mie richieste in una volta sola, dimmi pure.

Se troppo lungo/complesso da estrarre dimmi pure, e posso rimuovere/semplificare le richieste. Grazie! Simona

simonabisiani commented 2 years ago

@aborruso ho finito di rivisitare tutte le tematiche, se vuoi posso farti una tabella generale con tutte le mie richieste (circa 10 tabelle), e poi da lì possiamo vedere se sono fattibili?

aborruso commented 2 years ago

Ciao @simonabisiani , ok.

Mi indichi pure una data desiderata entro quando le vorresti pronte?

Grazie

simonabisiani commented 2 years ago

Perfetto @aborruso. La data di rilascio per queste visualizzazioni è il 15 Ottobre, quindi direi entro il 30 Settembre dovrebbe andare bene.

Qua sotto le mie richieste - ho incluso quelle che avevo messo qua sopra, a cui ho applicato delle modifiche al taglio geografico. Altre info generali: dove mancava il taglio regionale ho scelto la ripartizione geografica. C'è anche una tabella il cui dettaglio è Stati Europei. Se è facile estrarre anche il taglio nazionale affianco a quello regionale, li estrarrei entrambi. Altrimenti, il taglio regionale basta e avanza per queste tematiche! Una tabella ha due variabili extra: se dovessi sceglierne una, la prima ("Ordine scolastico") ha precedenza.

TEMA TABELLA VARIABILI DA ESTRARRE ANNI DETTAGLIO GEOGRAFICO
Istruzione Alunni con disabilità della scuola secondaria di II grado (valori per 100 alunni con le stesse caratteristiche) Tipo di scuola superiore tutti regionale
Istruzione Alunni con disabilità (valori per 100 alunni con le stesse caratteristiche) Ordine scolastico; Tipo di gestione tutti regionale
Istruzione Persone di 25 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e titolo di studio (valori percentuali) Sesso tutti ripartizione geografica
Istruzione Numero scuole per caratteristiche edificio scolastico (Valori percentuali) Caratteristiche edificio scolastico tutti regionale
Lavoro Persone di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e condizione professionale dichiarata (valori percentuali) Sesso tutti ripartizione geografica
Lavoro Persone occupate di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e posizione nella professione (valori percentuali) Sesso tutti ripartizione geografica
Famiglie Persone per gravità delle limitazioni nelle attività abitualmente svolte e tipologia familiare (valori percentuali) Sesso tutti nazionale
Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e trasporto pubblico extraurbano (valori percentuali) Sesso tutti regionale
Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e utilizzo del treno (valori percentuali) Sesso tutti regionale
Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e utilizzo trasporto pubblico urbano (valori percentuali) Sesso tutti regionale
Trasporto Persone di 18 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e uso automobile come conducente (valori percentuali) Sesso tutti regionale
Protezione sociale Prestazioni della protezione sociale per la disabilità per tipo di beneficio (milioni di euro) per tipo di benefici assistenziali Tipo di beneficio tutti Europa Dettaglio Stato

Ho preso i nomi dall'Elenco Tavole una volta selezionata la tavola, ignorando il titolo della tavola nel quadro delle Caratteristiche scelte in alto a destra - a volte ci sono discrepanze. Se ricordo bene il nome che serve a te è appunto quello che appare sotto a Elenco Tavole. Ecco un paio di esempi qua sotto dove si vede tale discrepanza:

image image

Se hai domande, commenti, richieste, dimmi pure. Grazie Andy!

aborruso commented 2 years ago

Ciao @simonabisiani per automatizzare tutto, c'è da sputare un po' di sangue.

Ti faccio una proposta, è solo una proposta.

Per ognuno dei record di sopra, mi puoi indicare il link che porta alla pagina di dettaglio di sintesi? E poi io creo script per scaricare da lì tutte le combinazioni e normalizzo tutti i dataset.

Faccio un esempio.:

A me servirebbe questo URL. Da questo poi mi faccio script per download (ad esempio) di file per regione.

Che ne pensi? Sono pazzo?

image

simonabisiani commented 2 years ago

@aborruso, certo, posso farlo!

Ho capito bene che basta che arrivo al dettaglio geografico che mi interessa, e che quindi si tratta di un URL per tavola, non uno per ciascun elemento geografico (ad esempio un URL per ciascuna regione)?

aborruso commented 2 years ago

Ho capito bene che basta che arrivo al dettaglio geografico che mi interessa, e che quindi si tratta di un URL per tavola, non uno per ciascun elemento geografico (ad esempio un URL per ciascuna regione)?

Basta che arrivi al dettaglio geografico che ti interessa (sopra ad esempio la regione), con gli altri filtri scelti: sopra il tipo scuola e checkati tutti gli anni.

Questo è un solo URL. Poi a me scaricare le enne regioni

simonabisiani commented 2 years ago

Okay @aborruso.

Dunque, ho riscontrato un paio di problemi. In due casi (condizione professionale dichiarata e posizione nella professione) non riesco a risalire al dettaglio che mi interessa: la variabile Sesso esiste solo a livello nazionale - o è perlomeno il massimo a cui sono arrivata io. Quindi di fatto ti ho messo due URLs, uno per ottenere il breakdown sesso a livello nazionale, uno per estrarre i dati a livello di ripartizione geografica.

Poi, stranamente, a volte nella lista di Tabelle (il punto di partenza) sono dovuta partire dalla selezione di un anno in particolare (e non dalla serie storica) per poter generare la vista dettagliata che mi interessa (andando poi a selezionare tutti gli anni una volta aperta la tabella nel dettaglio e selezionate le variabili di interesse); altre volte la serie storica funziona.

Ho fatto un test dove ho riaperto tutti i miei URLs, ma alcuni, una volta riaperti, non hanno tutti gli anni selezionati come da me effettuato prima di salvare l'URL (si tratta di giusto un paio di tavole, non molte).

Ecco l'URL per tavola:

URL TEMA TABELLA VARIABILI DA ESTRARRE ANNI DETTAGLIO GEOGRAFICO
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3091DM09OH2000000&p=0&sp=null&l=0&exp=0&st=1VVO Istruzione Alunni con disabilità della scuola secondaria di II grado (valori per 100 alunni con le stesse caratteristiche) Tipo di scuola superiore tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V30918409OH200000000&p=0&sp=null&l=0&exp=0&st=1VVO Istruzione Alunni con disabilità (valori per 100 alunni con le stesse caratteristiche) Ordine scolastico; Tipo di gestione tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3091OQ09OG100000000&p=0&sp=null&l=0&exp=1 Istruzione Persone di 25 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e titolo di studio (valori percentuali) Sesso tutti ripartizione geografica
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3091MH09OH20000000000&p=0&sp=null&l=0&exp=1 Istruzione Numero scuole per caratteristiche edificio scolastico (Valori percentuali) Caratteristiche edificio scolastico tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3092C109OG00000000000&p=0&sp=null&l=0&exp=1 Lavoro Persone di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e condizione professionale dichiarata (valori percentuali) Sesso tutti nazionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3092BP09OG100000000&p=0&sp=null&l=0&exp=1 Lavoro Persone di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e condizione professionale dichiarata (valori percentuali) - tutti ripartizione geografica
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3092BL09OG00000000000&p=0&sp=null&l=0&exp=0&st=0FVO Lavoro Persone occupate di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e posizione nella professione (valori percentuali) Sesso tutti nazionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3092BH09OG100000000&p=0&sp=null&l=0&exp=0&st=0FVO Lavoro Persone occupate di 15 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e posizione nella professione (valori percentuali) - tutti ripartizione geografica
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V3092A109OG00000000000&p=0&sp=null&l=0&exp=0&st=0FVO Famiglie Persone per gravità delle limitazioni nelle attività abitualmente svolte e tipologia familiare (valori percentuali) Sesso tutti nazionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V30925509OH20000000000&p=0&sp=null&l=0&exp=0&st=0FVO Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e trasporto pubblico extraurbano (valori percentuali) Sesso tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V30925H09OH20000000000&p=0&sp=null&l=0&exp=1 Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e utilizzo del treno (valori percentuali) Sesso tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V30924P09OH20000000000&p=0&sp=null&l=0&exp=1 Trasporto Persone di 14 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e utilizzo trasporto pubblico urbano (valori percentuali) Sesso tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V30924D09OH20000000000&p=0&sp=null&l=0&exp=0&st=0FVO Trasporto Persone di 18 anni e più per gravità delle limitazioni nelle attività abitualmente svolte e uso automobile come conducente (valori percentuali) Sesso tutti regionale
https://disabilitaincifre.istat.it/dawinciMD.jsp?a1=u2i4a94&a2=_-&n=$$$9$$$$$$$&o=&v=1V20A1JI2NSG1000000&p=0&sp=null&l=0&exp=0&st=3VVG Protezione sociale Prestazioni della protezione sociale per la disabilità per tipo di beneficio (milioni di euro) per tipo di benefici assistenziali Tipo di beneficio tutti Europa Dettaglio Stato
aborruso commented 2 years ago

In due casi (condizione professionale dichiarata e posizione nella professione) non riesco a risalire al dettaglio che mi interessa: la variabile Sesso esiste solo a livello nazionale - o è perlomeno il massimo a cui sono arrivata io.

È vero, il sesso c'è soltanto per il taglio nazionale. Il taglio a ripartizioni sarà senza sesso.

simonabisiani commented 2 years ago

Ciao @aborruso, ci sono novità riguardo a questa issue e alla #13?

A presto!

aborruso commented 2 years ago

Cara @simonabisiani , ti rispondo domani.

Scusami, ma sono giornate difficili.