La funzione e' pronta e va testata INSIEME (fammi sapere quando sei a Roma che ci mettiamo d'accordo)

Intanto un paio di domande sugli inserimenti da fare:

Domanda1
Dal file con le direttive "TabellaCampi"
riporti che la colonna "Label" dei file csv deve finire dentro seismograms::flag_lav.
Nella stessa tabella esiste anche il campo "label"

Domanda2
I vari campi della reliability a quanto devo impostarli (in automatico)?

E poi alcuni problemi sui file trovati debuggando il codice (che andrebbero evitati il piu' possibile altrimenti si crea un problema di inconsistenza di dati):

1. 1 valore di COD_STR e' impostato a 'NC' mentre mi aspetto un numero
2. Il valore Timbro spesso e' a '*'
3. il valore CodiceFaldone spesso e' a '*', non inserisco TUTTA LA SERIE di record (delle varie tabelle), oppure non aggiorno solo la tabella dei faldoni?
4. Il campo "restauro" su Db ha una serie di costrizioni, puo' essere T,R,N,vuoto. Sul file e' '*', lo considero vuoto?

1. assente l'header della colonna "variante". Basta l'aggiunta/assenza di un campo per far shiftare gli indici degli array creando il panico.

1. ci sono alcuni NomeStazione=Comp1=Comp2=Comp3='*' immagino che vadano saltati...

1. manca completamente la colonna Variante, scazzano tutti gli indici...
2. il codice stazione e' molto "ballerino"
3. il confronto sul nome delle componenti tra file.csv e tabella sballa (anche un "_" in piu' fa saltare il check)
4. alcuni tipi di carta non sono presenti nel db, altri hanno caratteri in piu' che fanno saltare i confronti

1. manca completamente la colonna Variante, scazzano tutti gli indici...

1. manca codice faldone, quindi (AD ORA) non aggiungo numerose righe

1. comp1 = "T" input non valido

1. assente l'header della colonna "variante". Basta l'aggiunta/assenza di un campo per far shiftare gli indici degli array creando il panico.
2. il confronto sul nome delle componenti tra file.csv e tabella sballa (anche un "_" in piu' fa saltare il check)

1. il confronto sul nome delle componenti tra file.csv e tabella sballa (anche un "_" in piu' fa saltare il check)
2. COD_POSS = '*' devo saltare tutta la riga?

Per quanto riguarda la domanda 1 soprassiedo per parlarne un attimo insieme. Sulla domanda 2 si allegano file corretti.
Graziano

Allego per comodità file zip dei file precedentemente spediti. Anche perché ce ne sono 2 in più.
G

AGGIORNAMENTO (DA MAIL)¶

Ciao
ho resettato il db sul mio pc e in effetti molti errori che avevo si sono risolti :-)

ora ho un piccolo dubbio (una fesseria ma e' basilare)... faccio un sunto delle operazioni:

i CSV da caricare devono seguire questi 2 passaggi, il primo e' un controllo, il secondo aggiunge i dati nel DB.
Step1: Controlla record su db caricando il CSV (quello che poi ti torna la mail con i 4 allegati),
e poi passa per lo
Step2: Aggiungi record su db caricando il CSV

Nello Step1 si caricano i file CSV, lo script controlla e invia una mail con 4 allegati:
il file inserito
i dati gia' presenti
i dati mancanti
gli errori trovati (in caso ci siano, ma serve principalmente a me)

A questo punto il file con i dati mancanti dovra' essere inserito nel secondo script OPPURE e' sempre il file originale? Immagino quello con i dati mancanti (se e' corretto puoi anche smettere di leggere).

Se invece nel secondo script mandi il file originale, le righe gia' presenti devono essere aggiornate? se si, quali campi? in certi casi alcuni dati cambiano (e manco poco :-D)

ci sentiamo piu' tardi (quando puoi)

Rispondo. spero più chiaramente possibile, poi è bene sentirci.

Relativo a TUTTI i files:
Spesso lo script trova gia' il record in faldone_sismogramma.
Immagino che sia stato inserito precedentemente, NON lo considero un errore. CORRETTO? ESATTO

AQU: successo solo in un campo
Prima di andare con l'import, se possibile farlo su Excel, controllare che la "lunghezza" dei campi sia corretta.
Nel caso particolare la "lunghezza" dell'orario, in un campo era 5char invece di 4 e, nei controlli automatici, non sono in grado di decidere se togliere il primo o l'ultimo char.
Oltretutto alcuni campi li utilizzo per comporre il nome del sismogramma, quindi serve avere un controllo maggiore a monte. CERTAMENTE STAREMO ATTENTI. FORSE SAREBBE BENE CHE I RECORD CHE HANNO PROBLEMI LI CONCENTRASSI TUTTI NEL FILE DEI PROBLEMI CON UNA NOTA DEL CAMPO CHE CREA PROBLEMA. NOI CORREGGIAMO E SI RIMETTE IN INPORT.

BOL, CAT: Molti record hanno componente 'D', non presente nella tabella 'components', quindi vengono ignorati CAT NON AVEVA PROBLEMI, BOL CORRETTI E ALLEGO

GIB: Non esiste un osservatorio attivo nel '1969-10-10'
NON IMPORTA CHE FAI IL TEST SUI CAMPI DI date_start e date_stop. QUELLI ANDREBBERO AGGIORNATI IN BASE AI SISMOGRAMMI CHE SONO DEL DB. NON E' UN CAMPO PRECOMPILATO

RMP1: MANCA RM1 NEL DB TI DOBBIAMO MANDARE I DATI PER CREARE IL RECORD nelle tabelle observatories e observatories_locations
- Non esiste un osservatorio attivo nel '1969-05-15'
- Non esiste un osservatorio attivo nel '1968-11-04'

- numerose righe "mozzate" con questa dicitura: "Rete Mobile Strumento in prova - WARNING: unknown component - conventionally attributed"

- questo faldone_sismogramma::cod_fald non esiste quindi non vengono collegati i sismogrammi (non viene inserito il record in faldone_sismogramma) VA CREATO IL CODICE FALDONE NELLA RELATIVA TABELLA
RMP_198100001
RMP_198100002
RMP_198100003

Inserito in questo ticket anche la funzione del #142

lo script adesso accetta in ingresso i file CSV, seguendo il formato di questo ticket (e descritto sulla pagina http://seismogramrequest.rm.ingv.it/graziano-checks/checks.html )

• seismograms (e, di conseguenza, in seismograms_instr_install_new e documents)
• faldone_sismogramma (e, se necessario, in faldone)

1. il file sottomesso
2. il file con tutte le righe corrette + cod_seismogram
3. il file con tutte le righe non corrette + cod_seismogram + errori

modifica per ora_fi fatta, adesso e' un errore non bloccante.
aggiunta altra colonna alla fine dei entrambi i file in cui mostro gli errori non bloccanti

la funzione e' disponibile sul sito:
http://seismogramrequest.rm.ingv.it/graziano-checks/checks.html