Italian community of Lazarus and Free Pascal

Programmazione => Databases => Topic aperto da: xinyiman - Gennaio 14, 2015, 10:43:26 am

Titolo: Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 14, 2015, 10:43:26 am
Ciao ragazzi, stò realizzando una libreria che permette di mettere in una tabella tutte le insert, gli update e le delete di un database firebird per ottenere un sistema di sincronizzazione.

Ci sono quasi, quello che mi manca è avere una funzione che mi dica se mettere gli apici nella query (perchè è una query che ricostruisco in base ai campi e alla tipologia). Avete idee al riguardo?

Codice: [Seleziona]
                    strTrig:='CREATE TRIGGER ' + Get_Identificativi_Trigger_Sync + '_' + NomeTabella + '_Ins_Upd FOR ' + NomeTabella + ' ' +
                                     'AFTER INSERT OR UPDATE ' +
                                     'AS BEGIN ' +
                                     'IF (INSERTING) THEN ' +
                                     'begin ' +
                                     'insert into T_LOG (DATE_SQL, STRING_SQL) values ( current_timestamp, 'insert into TAB1(campo1,campo2,campo3)values('||New.CAMPO1||','''||New.CAMPO2||''','''||New.CAMPO3||''');'); ' +
                                     'end else ' +
                                     'begin ' +
                                     'insert into T_LOG (DATE_SQL, STRING_SQL) values ( current_timestamp, 'update da aggiornare'); '+
                                     'end '+
                                     'END ';

Alla fine vado a creare un trigger per ogni tabella  e dove vedete le due insert andrò a modificarle a run time andando a leggere il nome del campo e il tipo di campo dall'opportuna tabella di sistema.
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: Stilgar - Gennaio 14, 2015, 11:30:53 am
Io userei "Format" per non incasinarmi la vita..... ;)

Codice: [Seleziona]
Format(
'Create trigger %s_%s_Ins_Upd for %1:s after insert or update as begin '+
'if (inserting) then '+
'begin ' .... [Get_Identificativi_Trigger_Sync,NomeTabella,...]);
Stilgar
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 14, 2015, 11:38:36 am
Io userei "Format" per non incasinarmi la vita..... ;)

Codice: [Seleziona]
Format(
'Create trigger %s_%s_Ins_Upd for %1:s after insert or update as begin '+
'if (inserting) then '+
'begin ' .... [Get_Identificativi_Trigger_Sync,NomeTabella,...]);
Stilgar

Suggerimento apprezzato ma il mio problema è un altro.

Se vado a realizzare una query a runtime (all'interno del trigger costruito a run time) come faccio a sapere se il campo1 necessita di essere tra '?

Ad esempio

insert into tabella(campo1,campo2,campo3)values('0','caio','2');

come faccio a sapere che 0 deve essere inserito tra '0' e non come 0? Io ricerco una metodologia che funzioni senza doverci rimettere le mani sopra. Faccio un esempio con la seguente query

Codice: [Seleziona]

select CAMPI.RDB$FIELD_NAME, TipiDatiFirebird.RDB$TYPE_NAME
from
(select RDB$RELATION_FIELDS.RDB$FIELD_NAME, RDB$FIELDS.RDB$FIELD_TYPE from RDB$RELATION_FIELDS INNER join RDB$FIELDS ON RDB$FIELDS.RDB$FIELD_NAME=RDB$RELATION_FIELDS.RDB$FIELD_SOURCE where RDB$RELATION_NAME='T_LOG') as CAMPI
inner join
(select RDB$TYPE, RDB$TYPE_NAME from RDB$TYPES where RDB$FIELD_NAME='RDB$FIELD_TYPE') as TipiDatiFirebird
ON CAMPI.RDB$FIELD_TYPE=TipiDatiFirebird.RDB$TYPE

Ottengo la lista dei campi della tabella T_LOG e il relativo tipo. COme faccio a sapere in base al tipo di dato qual'è il separatore giusto?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: Stilgar - Gennaio 14, 2015, 11:41:49 am
xinyiman.
Se fai a runtime la stringa da passare a Format e componi l'array dei parametri con un ciclo for puoi avere tutte le info sui tipi e vedere cosa mettere (apice o non apice per capirsi).

Stilgar
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 14, 2015, 11:46:31 am
xinyiman.
Se fai a runtime la stringa da passare a Format e componi l'array dei parametri con un ciclo for puoi avere tutte le info sui tipi e vedere cosa mettere (apice o non apice per capirsi).

Stilgar

Mi sa che non ho capito. Ma tu parli del format di lazarus o di firebird?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: Stilgar - Gennaio 14, 2015, 12:03:28 pm
Lazarus.

Codice: [Seleziona]
formatString := ''
for indice := 0 to numeroDiCampi do
begin
  case capo[indice].typeOf do
 'Stringa' :
begin
  formatString := formatString + '\'%s\'';
parametro[indice] := campo[indice].value;
end;
....
end;

QuestyString := Format(formatString,campi);



Qualche cosa di simile....
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 14, 2015, 12:14:09 pm
Lazarus.

Codice: [Seleziona]
formatString := ''
for indice := 0 to numeroDiCampi do
begin
  case capo[indice].typeOf do
 'Stringa' :
begin
  formatString := formatString + '\'%s\'';
parametro[indice] := campo[indice].value;
end;
....
end;

QuestyString := Format(formatString,campi);



Qualche cosa di simile....

Ok ma io voglio proprio bypassare l'operazione

  case capo[indice].typeOf do
 'Stringa' :


perchè se domani introducono il campo StringaLite devo modificare il sorgente

io devo mettere delle query string come valore di un campo all'interno di una tabella, vorrei fare la cosa più generica possibile ed evitare qualcosa che poi mi costringa a metterci mano o perchè introducono delle altre tipologie o perchè io ne dimentico alcune.

Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: Stilgar - Gennaio 14, 2015, 01:23:26 pm
hihi
Con RTTI è difficile che ti dimentichi qualche tipo :)
C'è un "case" con tutti i tipi.
In ogni caso devi testare se è una stringa e mettere l'apice.
Se introducono StringaLite, per il compilatore è sempre una di queste stringhe : kSString,tkLString,tkAString,tkWString.
Quindi se metti un case che verifichi queste quattro "costanti" sei a cavallo.
Se lavori con i variant, le cose non cambiano molto: varstring o varustring.

Non ho capito il problema forse.

Stilgar
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 14, 2015, 04:00:30 pm
hihi
Con RTTI è difficile che ti dimentichi qualche tipo :)
C'è un "case" con tutti i tipi.
In ogni caso devi testare se è una stringa e mettere l'apice.
Se introducono StringaLite, per il compilatore è sempre una di queste stringhe : kSString,tkLString,tkAString,tkWString.
Quindi se metti un case che verifichi queste quattro "costanti" sei a cavallo.
Se lavori con i variant, le cose non cambiano molto: varstring o varustring.

Non ho capito il problema forse.

Stilgar
Tu mi stai suggerendo di lavorare con le funzioni di lazarus e zeos. Io pensavo di lavorare con i risultati delle query che lancio sulle tabelle di sistema di firebird. Ora vedo cosa posso fare
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: Stilgar - Gennaio 14, 2015, 05:54:12 pm
Ah...
Allora con il resultsetmetadata puoi sapere di che tipo sono i campi.

Stilgar
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 17, 2015, 11:09:18 am
oh, tienici aggiornati ;)
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 17, 2015, 09:43:06 pm
Ragazzi, qualche passo avanti, provate a compilare l'esempio allegato, il database firebird è sempre allegato (pippo.fdb). Lanciate l'eseguibile premete il primo tasto, poi eseguite le seguenti query tramite flamerobin

Codice: [Seleziona]
insert into TAB2 (CAMPO1, CAMPO2, CAMPO3, CAMPO4)values (1,'CAMPO1',0,'CAMPO1');
insert into TAB2 (CAMPO1, CAMPO2, CAMPO3, CAMPO4)values (2,'CAMPO2',0,'CAMPO2');
insert into TAB2 (CAMPO1, CAMPO2, CAMPO3, CAMPO4)values (3,'CAMPO3',0,'CAMPO3');
insert into TAB2 (CAMPO1, CAMPO2, CAMPO3, CAMPO4)values (4,'CAMPO4',0,'CAMPO4');

update TAB2 set campo2='pippo', campo4='pippo', campo3=2 where campo1=1 and campo3=0;

delete from tab2 where campo1=1 and campo3=0;
Poi dall'eseguibile premete anche il secondo tasto. Dopo andate a vedere il file TLog.SQL, che dovrebbe risultare così

Codice: [Seleziona]
insert into TAB2(CAMPO1, CAMPO2, CAMPO3, CAMPO4)values(1, 'CAMPO1', 0, 'CAMPO1');
insert into TAB2(CAMPO1, CAMPO2, CAMPO3, CAMPO4)values(2, 'CAMPO2', 0, 'CAMPO2');
insert into TAB2(CAMPO1, CAMPO2, CAMPO3, CAMPO4)values(3, 'CAMPO3', 0, 'CAMPO3');
insert into TAB2(CAMPO1, CAMPO2, CAMPO3, CAMPO4)values(4, 'CAMPO4', 0, 'CAMPO4');
UPDATE TAB2 SET CAMPO2='pippo' WHERE  CAMPO1=1 AND  CAMPO2='CAMPO1' AND  CAMPO3=0;
UPDATE TAB2 SET CAMPO3=2 WHERE  CAMPO1=1 AND  CAMPO2='CAMPO1' AND  CAMPO3=0;
UPDATE TAB2 SET CAMPO4='pippo' WHERE  CAMPO1=1 AND  CAMPO2='CAMPO1' AND  CAMPO3=0;
Il mio problema ora è che se vado a ricostruire il database con il risultato ottenuto, viene sbagliato, perchè:


UPDATE TAB2 SET CAMPO3=2 WHERE  CAMPO1=1 AND  CAMPO2='CAMPO1' AND  CAMPO3=0;

cambia la chiave primaria per la query successiva

UPDATE TAB2 SET CAMPO4='pippo' WHERE  CAMPO1=1 AND  CAMPO2='CAMPO1' AND  CAMPO3=0;

Come fare?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 09:38:03 am
Nessuna idea?!
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 10:31:24 am
se non ho capito male, a fronte di una unica UPDATE, generi 3 UPDATE, una per ogni campo.

Tra l'altro nella where ci metti anche il vecchio valore.

Come mai non generi una sola istruzione?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 11:16:56 am
se non ho capito male, a fronte di una unica UPDATE, generi 3 UPDATE, una per ogni campo.

Tra l'altro nella where ci metti anche il vecchio valore.

Come mai non generi una sola istruzione?

Tu dici di far diventare (ad esempio) questo
Codice: [Seleziona]
SET TERM ^ 
ALTER TRIGGER TRIG_SYNC__TAB1_INS_UPD ACTIVE
AFTER INSERT OR UPDATE POSITION 0
AS BEGIN
  IF (INSERTING) THEN
begin
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'insert into TAB1(CAMPO1, CAMPO2, CAMPO3)values('||New.CAMPO1||', '''||New.CAMPO2||''', '''||New.CAMPO3||''');');
end else IF (UPDATING) THEN
begin 
IF (New.CAMPO1<>Old.CAMPO1) THEN
BEGIN
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'UPDATE TAB1 SET CAMPO1='||New.CAMPO1||' WHERE  CAMPO1='||Old.CAMPO1||';');
END 
IF (New.CAMPO2<>Old.CAMPO2) THEN
BEGIN
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'UPDATE TAB1 SET CAMPO2='''||New.CAMPO2||''' WHERE  CAMPO1='||Old.CAMPO1||';');
END 
IF (New.CAMPO3<>Old.CAMPO3) THEN
BEGIN
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'UPDATE TAB1 SET CAMPO3='''||New.CAMPO3||''' WHERE  CAMPO1='||Old.CAMPO1||';');
END
end
END ^
SET TERM ; ^

In questo?

Codice: [Seleziona]
SET TERM ^ 
ALTER TRIGGER TRIG_SYNC__TAB1_INS_UPD ACTIVE
AFTER INSERT OR UPDATE POSITION 0
AS BEGIN
  IF (INSERTING) THEN
begin
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'insert into TAB1(CAMPO1, CAMPO2, CAMPO3)values('||New.CAMPO1||', '''||New.CAMPO2||''', '''||New.CAMPO3||''');');
end else IF (UPDATING) THEN
begin 
insert into T_LOG (stato_record,DATE_SQL, STRING_SQL) values (0, current_timestamp, 'UPDATE TAB1 SET CAMPO1='||New.CAMPO1||',CAMPO2='''||New.CAMPO2||''',CAMPO3='''||New.CAMPO3||''' WHERE  CAMPO1='||Old.CAMPO1||';');
end
END ^
SET TERM ; ^
Avevo scartato questa soluzione perchè in ogni caso va a forzare la scrittura di tutti i campi del record anche se ne è stato modificato uno solo. Ma alla luce dei fatti direi che è giusto così.
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 11:30:25 am
Non hai torto quando dici di voler evitare di scrivere tutti i campi, specie se non sono stati modificati.
Se però pensi alla correttezza della replicazione (tralasciamo le performance), cosa capita se per aggiornare un record hai bisogno di 10 update e ne vanno a buon fine solo 3? Bisognerebbe lavorare con le transazioni ma sarebbe una complicazione inutile in quanto, con una unica UPDATE, risolvi tutto.
Più che altro puoi limitare l'istruzione UPDATE ai soli campi che ti interessano per la replicazione, tralasciando gli altri.

Poi ti consiglio di fare in modo che nella WHERE finiscano solo i campi della chiave primaria.

Domanda:
si tratta di una replicazione unidirezionale?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 11:45:56 am
Si la where è già studiata così. Si per il momento è unidirezionale. In quanto la libreria crea una tabella T_Log ( o come preferisci chiamarla) e li mette tutti i movimenti di insert, update e delete di tutte le tabelle del database (ovviamente di tutte le tabelle e i campi presenti al momento dell'installazione dei trigger da parte della mia libreria, in caso si andassero ad aggiornare i campi di una tabella o si creasse una nuova tabella o si distruggesse una nuova tabella sarebbe opportuno rilanciare il software che comprende la mia libreria). Poi la mia libreria ha una funzione per l'esportazione delle query contenute nella T_Log in un file. Ergo ne fai quello che vuoi. (nel mio caso reimportarle in un altro DB)
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 03:38:19 pm
quindi l'import lo fai manualmente?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 04:37:46 pm
quindi l'import lo fai manualmente?

Devo poi creare una funzione per l'import
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 04:51:52 pm
se ti può interessare dai un'occhiata al seguente link (è un mio progetto)
http://sourceforge.net/projects/dbupdaterxs/ (http://sourceforge.net/projects/dbupdaterxs/)

si tratta di un progetto che serve ad aggiornare un database fornendo una cartella con dentro degli script
l'aggiornamento viene tracciato all'interno del database stesso in modo che sai esattamente a che script sei arrivato (ed hai la certezza che non venga eseguito 2 volte uno stesso script)

puoi sia utilizzare le classi che usarlo come procedura schedulata
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 05:17:43 pm
Grazie gli darò un occhiata, anche se per il mio utilizzo l'import sarà fatto in php :)
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 05:21:19 pm
Progetto interessante il tuo :)
Me lo descrivi un po' più nel dettaglio? Da cosa è nata la tua esigenza di farlo?
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 05:38:34 pm
è una riscrittura di un tool fatto con delphi che usiamo in azienda
questa versione è diversa in quanto è fatta con lazarus, è open source, è multidatabase e multiprogetto (solo che la sto usando poco, magari c'è qualche bug in giro)

fondamentalmente serve per tenere aggiornati N database secondo una lista di script
quando faccio delle modifiche al gestionale: (1) genero gli script (2) li distribuisco ai clienti e (3) loro ci aggiornano il loro database

Edit:
l'esigenza è venuta pensando ad un gestionale cross OS e cross DB, ma è solo un pensiero :D
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: nomorelogic - Gennaio 19, 2015, 05:40:48 pm
Grazie gli darò un occhiata, anche se per il mio utilizzo l'import sarà fatto in php :)

beh, se lo puoi installare sul server dove gira apache...
Titolo: Re:Aiuto per libreria di sincronizzazione db firebird
Inserito da: xinyiman - Gennaio 19, 2015, 05:43:26 pm
Allora passo avanti, ora dovrebbe funzionare adeguatamente. Ho bisogno di tester, chi mi testa il risultato su dei suoi database? (vi suggerisco di farlo sulle copie).

Compilate il progetto, inseriti i parametri di connessione al vostro db. Premete sul tasto [CONNETTI] poi premete [INSTALLAZIONE TRIGGER E TABELLA LOG], ora andate a fare delle modifiche sui vostri db, fatene diverse e variegate, se qualcuno ha dei campi BLOB ben vengano come test. Poi premete il tasto [ESTRAI DATI].

Attenzione vi consiglio di lanciare il progetto non come debug, ma dopo la compilazione chiudere lazarus e lanciare l'eseguibile.

Attendo vostre notizie