Italian "INSERT multiple rows" via PHP

Elric · Mar 22, 2022

Partendo da qui: https://www.b4x.com/android/forum/threads/b4a-database-online.135571/post-861289, è possibile a vostro avviso fare un Insert multiplo? Qualcuno lo ha fatto? Se si, come?

Vorrei scartare il ciclo for di Insert singoli: se si tratta di 10 righe, non è un problema, ma 5000 potrebbero esserlo.

Allo stesso tempo, la sitassi per fare un Insert multiplo sarebbe:

SQL:

INSERT INTO
    projects(name, start_date, end_date)
VALUES
    ('AI for Marketing','2019-08-01','2019-12-31'),
    ('ML for Sales','2019-05-15','2019-11-20');

ma se formo una stringa composta di 5000 record con 10 campi, vuol dire più di 50000 parole per un comando via OkHttpUtils, cosa che non ho ancora provato.

Grazie!

Star-Dust · Mar 22, 2022

Elric said:
è possibile a vostro avviso fare un Insert multiplo?

Si

Elric said:
ma se formo una stringa composta di 5000 record con 10 campi, vuol dire più di 50000 parole per un comando via OkHttpUtils, cosa che non ho ancora provato.

Io non manderei 5000 campi in un solo insert. Alcune REST API (come quelle di DANEA) ti permettono di fare inserimento multipli (e letture multiple) per 10/20 record per volta. Questo è già molto perché riduci il carico di 10 volte.

Farlo di 5000 tutti insieme sarebbe una pazzia in qualunque linguaggio. In Angular il testo html creato per essere un buon codice deve rientrare in un limite massimo id caratteri. Anche quando fai download di dati (byte) non si scarica 1gigabyte di file in un invio ma viene spezzettato in piu trance.....

Quindi l'ide di un inserimento multiplo va bene, uno globale in una sola stringa non credo affatto

Elric · Mar 22, 2022

Elric said:
è possibile a vostro avviso fare un Insert multiplo?

Star-Dust said:
Si

e la risposta a "Se si, come?" è, se ho capito bene, di inviare 10-20 record per volta e così i 5000 record diventano 500 o 250 invii.

Star-Dust · Mar 22, 2022

Mica posso rispondere a tutto io.

Comunque io manderei al php un JSON che contiene un array dei campi e dal php ricostruirei la query. Ma è solo un idea al volo, sicuramente potrebbero esserci idee migliori

Poi molti dipende da quale metodo usi nel php per passare i parametri

Elric · Mar 22, 2022

Star-Dust said:
Mica posso rispondere a tutto io.

e perché no?

Comunque grazie! È qualcosa su cui lavorare!

Luciano Veneziano · Mar 23, 2022

Io preferisco inviare i record uno a uno e verificare che l'acquisizione sia avvenuta correttamente.
Li mando in Post è funziona tutto bene.

Elric · Mar 25, 2022

Luciano Veneziano said:
Io preferisco inviare i record uno a uno e verificare che l'acquisizione sia avvenuta correttamente.
Li mando in Post è funziona tutto bene.

E come fai?

Elric · Mar 28, 2022

Nel frattempo che @Luciano Veneziano mi dica come fare, ho provato a darmi una risposta ma senza successo.

Allego progetto di test e qui di seguito una prima bozza di file php.

... che non funziona (tranne se il file json lo carico su server).

PHP:

<?php
    
    $table = ""; //Come la passo?

    echo "table = $table <br /><br />";
    echo "WOW! <br /><br />";

    $json = file_get_contents('php://input');
    //var_dump($json); // show contents
    //echo "<br />";
    //var_dump(count($json));
    //echo "<br />";
    
    $jsonIterator = new RecursiveIteratorIterator(
        new RecursiveArrayIterator(json_decode($json, TRUE)),
        RecursiveIteratorIterator::SELF_FIRST);
    
    $stackkey = [];
    $stackval = [];
    $ynStopKey = 0;
    foreach ($jsonIterator as $key => $val) {
        if(!is_array($val)) {
            if($ynStopKey == 0) {
                //print "key = ".$key."<br/>";
                //print "stackkey[0] = ".$stackkey[0]."<br/>";
                if($key == $stackkey[0]) {
                    //print "key = ".$key." & stackkey = ".$stackkey[0]."ynStopKey = 1<br/>";
                    $ynStopKey = 1;
                } else {
                    //print "key = ".$key." & stackkey = ".$stackkey[0]."ynStopKey = 0<br/>";
                    array_push($stackkey, $key);
                };
            };
          print $key."    : ".$val . "<br/>";
          array_push($stackval, $val);
        };
    };
    
    echo "<br />";
    for($i = 0, $size = count($stackkey); $i < $size; ++$i) {
      $sql = $sql . $stackkey[$i];
      if ($i < $size -1) {
        $sql = $sql . ", ";
      } else {
        $sql = $sql . " ";
      };
    };
    echo "key $sql";
    
    echo "<br />";
    echo "<br />";
    $sql = "";
    for($i = 0, $size = count($stackval); $i < $size; ++$i) {
      $sql = $sql . $stackval[$i];
      if ($i < $size -1) {
        $sql = $sql . ", ";
      } else {
        $sql = $sql . " ";
      };
    };
    echo "val $sql";
    
    echo "<br />";
    echo "<br />";
    $sql = ("INSERT INTO $table (");
    for($i = 0, $size = count($stackkey); $i < $size; ++$i) {
        $sql = $sql . $stackkey[$i];
        if ($i < $size - 1) {
          $sql = $sql . ", ";
        };
      };

    $sql = $sql . (") VALUES (");

    $stackkeysize = count($stackkey);
    for($i = 0, $stackvalsize = count($stackval); $i < $stackvalsize; ++$i) {
      $sql = $sql . $stackval[$i] . "'";
      if ($i < $stackvalsize - 1) {
        //print "i = ".$i." & stackkeysize = ".$stackkeysize." & (i % stackkeysize) = ".$i % $stackkeysize."<br/>";
        if ($i > 0 and ($i+1) % $stackkeysize == 0) {
            $sql = $sql . ("), (");
        } else {
            $sql = $sql . ", ";
        };
      } else {
        $sql = $sql . (")");
      };
    };
    echo "$sql";
    
?>

Qualcuno mi aiuta?

Con questo metodo, come passo il nome della tabella con cui poi costruire la query di insert?

Luciano Veneziano · Mar 29, 2022

E' facile. ho un unico file .PHP sul server (di fatto non uso alcuna pagina html) in cui mando la query come post
httpsPost("https:indirizzo","select * from navi where nome like ti%")
mi vengono restituite. se la query da un risultato
OK;3 'numero si records trovati
tianic;9;1890;
titanic;11;2010
tittis;45;2023
END
se faccio un'operazione di UPDATE o DELETE
OK;
END
In questo modo hai diverse opzioni, la più importante che non hai bisogno di drivers o files aggiuntivi e, soprattutto puoi creare applicazioni
concorrenti in piattaforme diverse, windows, linux, android os...
In ogni caso devi essere sicuro che la query abbia avuto successo, quindi se va storta una questi di 5000, come trovi dove sta il casino?

Elric · Mar 29, 2022

Grazie Luciano Veneziano.

... ma non ho capito.

Il mio obiettivo è prendere dei dati in locale (da delle list o dal database SQLite locale) e fare un insert multiplo sul database in mySQL.

Nel primo post c'è un rinvio ad una precedente discussione. In questa precedente discussione, grazie alla guida @sirjo66, il metodo utilizzato è GET. Con questo si riesce a passare quasi tutto quello che mi serve: la stringa di query mySQL, il nome della tabella, i campi, i valori, i filtri etc.

GET, però, ha il limite di poco più di 2000 caratteri.

Quindi, superando i 2000 caratteri del link da utilizzare via GET, dovrei ricorrere a POST (poi ci sono le considerazioni sulla sicurezza sulle quali sorvolo).

Da quanto hai scritto capisco che mandi in POST la stringa di query (SQLite? mySQL?) ma poi? In che modo prendi dei dati in locale e riesci a fare un insert multiplo sul database in mySQL? La massa di dati la passi in json ma come indichi la stringa di query e la tabella?

Nella mia testa, dovrei riuscire ad inviare quantomeno il nome della tabella in cui fare l'insert e la massa di dati.

Su come passare il nome della tabella insieme alla massa di dati con POST ci sto lavorando (con scarso successo) e ogni suggerimento è ben accetto.

Per l'nvio della massa di dati, invece, non capisco se c'è un errore nel mio php, perché sembra funzionare.

Infatti, se il medesimo contenuto del json che invio in POST tramite app lo copio su un file json presente all'interno del server e sostituisco

B4X:

$json = file_get_contents('php://input');

con

B4X:

$json = file_get_contents(percorso+nome_file);

la pagina html del browser mi restituisce ciò che vorrei vedere e quindi il codice php funziona.

Ma lo stesso risultato non l'ottendo con l'invio a mezzo di app B4J. Questa riesce ad estrarre un json ma sembra non riuscire ad inviarlo, perché il file php restituisce delle stringhe di controllo tranne il contenuto del json.

Luciano Veneziano · Mar 29, 2022

provo oggi a fare delle prove. Ti dicevo che non uso fare insert multipli perché sono pericolosi e se qualcosa va storto ti trovi le tabelle compromesse.
Sul Post la sicurezza c'è se usi https.
click su guarda qui dove ti spiega il meccanismo di $json = file_get_contents('php://input');

ivanomonti · Mar 29, 2022

Star-Dust said:
Mica posso rispondere a tutto io.

Comunque io manderei al php un JSON che contiene un array dei campi e dal php ricostruirei la query. Ma è solo un idea al volo, sicuramente potrebbero esserci idee migliori

Poi molti dipende da quale metodo usi nel php per passare i parametri

rispondi anche al mio quesito che sto imbastardendo

Luciano Veneziano · Mar 29, 2022

Elric said:

Nel frattempo che @Luciano Veneziano mi dica come fare, ho provato a darmi una risposta ma senza successo.

Allego progetto di test e qui di seguito una prima bozza di file php.

... che non funziona (tranne se il file json lo carico su server).

PHP:

<?php
  
    $table = ""; //Come la passo?

    echo "table = $table <br /><br />";
    echo "WOW! <br /><br />";

    $json = file_get_contents('php://input');
    //var_dump($json); // show contents
    //echo "<br />";
    //var_dump(count($json));
    //echo "<br />";
  
    $jsonIterator = new RecursiveIteratorIterator(
        new RecursiveArrayIterator(json_decode($json, TRUE)),
        RecursiveIteratorIterator::SELF_FIRST);
  
    $stackkey = [];
    $stackval = [];
    $ynStopKey = 0;
    foreach ($jsonIterator as $key => $val) {
        if(!is_array($val)) {
            if($ynStopKey == 0) {
                //print "key = ".$key."<br/>";
                //print "stackkey[0] = ".$stackkey[0]."<br/>";
                if($key == $stackkey[0]) {
                    //print "key = ".$key." & stackkey = ".$stackkey[0]."ynStopKey = 1<br/>";
                    $ynStopKey = 1;
                } else {
                    //print "key = ".$key." & stackkey = ".$stackkey[0]."ynStopKey = 0<br/>";
                    array_push($stackkey, $key);
                };
            };
          print $key."    : ".$val . "<br/>";
          array_push($stackval, $val);
        };
    };
  
    echo "<br />";
    for($i = 0, $size = count($stackkey); $i < $size; ++$i) {
      $sql = $sql . $stackkey[$i];
      if ($i < $size -1) {
        $sql = $sql . ", ";
      } else {
        $sql = $sql . " ";
      };
    };
    echo "key $sql";
  
    echo "<br />";
    echo "<br />";
    $sql = "";
    for($i = 0, $size = count($stackval); $i < $size; ++$i) {
      $sql = $sql . $stackval[$i];
      if ($i < $size -1) {
        $sql = $sql . ", ";
      } else {
        $sql = $sql . " ";
      };
    };
    echo "val $sql";
  
    echo "<br />";
    echo "<br />";
    $sql = ("INSERT INTO $table (");
    for($i = 0, $size = count($stackkey); $i < $size; ++$i) {
        $sql = $sql . $stackkey[$i];
        if ($i < $size - 1) {
          $sql = $sql . ", ";
        };
      };

    $sql = $sql . (") VALUES (");

    $stackkeysize = count($stackkey);
    for($i = 0, $stackvalsize = count($stackval); $i < $stackvalsize; ++$i) {
      $sql = $sql . $stackval[$i] . "'";
      if ($i < $stackvalsize - 1) {
        //print "i = ".$i." & stackkeysize = ".$stackkeysize." & (i % stackkeysize) = ".$i % $stackkeysize."<br/>";
        if ($i > 0 and ($i+1) % $stackkeysize == 0) {
            $sql = $sql . ("), (");
        } else {
            $sql = $sql . ", ";
        };
      } else {
        $sql = $sql . (")");
      };
    };
    echo "$sql";
  
?>

Qualcuno mi aiuta?

Con questo metodo, come passo il nome della tabella con cui poi costruire la query di insert?

Luciano Veneziano · Mar 29, 2022

Questo è il PHP

<?php
include_once("local/setup.php");

@$sql = $_POST["q"];

$mysqli = new mysqli("localhost",_USER,_PASS,_DATA);

if ($mysqli -> connect_errno) {
print $sql." - Errore di connessione MySQL";
exit();
}

if ($result = $mysqli -> query($sql)) {

print "OK;". mysqli_num_rows($result)."\r\n";

while($row = $result->fetch_assoc()) {
echo implode(';',$row);
print "\r\n";
}
}
$mysqli -> close();
print "END\r\n";
?>

Luciano Veneziano · Mar 29, 2022

Questo è il pezzo B4A

'-----------------------------------------------------------------------------------
Sub JobDone (Job As HttpJob)
End Sub
'-----------------------------------------------------------------------------------
Sub httpPost(path As String, SQL As String,id As String)
Dim j As HttpJob
j.Initialize("", Me)
j.PostString(path,SQL)
Wait For (j) JobDone(j As HttpJob)
If j.Success Then
refresh(id,j.GetString)
End If
j.Release
End Sub
'-----------------------------------------------------------------------------------
Sub refresh(id As String,res As String)
Select(id)
Case "fql": createFreqsList(res)
Case "usr": searchUser(res)
Case Else Log("errore:"&id)
End Select
End Sub
'-----------------------------------------------------------------------------------
Sub Post(sql As String,id As String)
httpPost("https://webhostapp.com/query.php","q="& sql,id)
End Sub
'-----------------------------------------------------------------------------------
Sub selUser(id As String)
Post("SELECT id, user, CF FROM users WHERE CF="&id,"usr")
End Sub
'-----------------------------------------------------------------------------------
Sub selFreqs(id As String)
CVF.Clear
Post("SELECT titolo,fsource.id,fid,uid,freq FROM fsource, fusers WHERE fsource.id = fusers.fid and uid = "&id&" group by fid","fql")
End Sub

Elric · Mar 30, 2022

Grazie @Luciano Veneziano!

Grazie (1) per avermi dato un'intuizione:

Elric said:
Per l'nvio della massa di dati, invece, non capisco se c'è un errore nel mio php, perché sembra funzionare.

Infatti, se il medesimo contenuto del json che invio in POST tramite app lo copio su un file json presente all'interno del server e sostituisco

B4X:

$json = file_get_contents('php://input');

con

B4X:

$json = file_get_contents(percorso+nome_file);

la pagina html del browser mi restituisce ciò che vorrei vedere e quindi il codice php funziona.

Ma lo stesso risultato non l'ottendo con l'invio a mezzo di app B4J. Questa riesce ad estrarre un json ma sembra non riuscire ad inviarlo, perché il file php restituisce delle stringhe di controllo tranne il contenuto del json.

Non funzionava perché l'URL da inserire è in "https" e non in "http". Una cosa stupida che avevo sottovalutato.

Nel mentre ho pensato che, dato che in POST passo una stringa, potrei manipolare la stringa nell'app (aggiungendo il comando di query e il nome della tabella) e poi manipolarla nuovamente in php ("splittando" la stringa e ricavando il comando, il nome della tabella e il json da cui recupero campi e valori).

Appena posso, aggiorno app e php.

Grazie (2) per avermi fornito il tuo metodo, che studierò!

Luciano Veneziano · Mar 30, 2022

Il mio metodo è stringato ed essenziale. funziona bene e sopratutto ti permette di creare la query in locale e "spararla" dall'altra parte.
Un altro vantaggio è, come ho già detto, che si possono creare applicazioni su diverse piattaforme che utilizzano il medesimo database senza alcun driver aggiuntivo.
Se hai dubbi fammi sapere.
P.S. preferisco usare i separatori piuttosto che JSON perché mi raddoppia le dimensione dei file da spedire dall'alttra parte.

Questo usa il sistema descritto con tre tabelle ed un'app windows, non ho il filmato dell'app android

Luciano Veneziano · Mar 30, 2022

Elric said:
Grazie @Luciano Veneziano!

Grazie (1) per avermi dato un'intuizione:

Non funzionava perché l'URL da inserire è in "https" e non in "http". Una cosa stupida che avevo sottovalutato.

Nel mentre ho pensato che, dato che in POST passo una stringa, potrei manipolare la stringa nell'app (aggiungendo il comando di query e il nome della tabella) e poi manipolarla nuovamente in php ("splittando" la stringa e ricavando il comando, il nome della tabella e il json da cui recupero campi e valori).

Appena posso, aggiorno app e php.

Grazie (2) per avermi fornito il tuo metodo, che studierò!

Perdonami ma non capisco:
"e poi manipolarla nuovamente in php ("splittando" la stringa e ricavando il comando, il nome della tabella e il json da cui recupero campi e valori)."
Potresti spiegarmi il perché di tanta complicazione?
Al limite, se vuoi fare una cosa "spacchiosa" ti fai delle stored procedure.

Italian "INSERT multiple rows" via PHP

Elric

Well-Known Member

Star-Dust

Expert

Elric

Well-Known Member

Star-Dust

Expert

Elric

Well-Known Member

Luciano Veneziano

Active Member

Elric

Well-Known Member

Elric

Well-Known Member

Attachments

Luciano Veneziano

Active Member

Elric

Well-Known Member

Luciano Veneziano

Active Member

ivanomonti

Expert

Luciano Veneziano

Active Member

Luciano Veneziano

Active Member

Luciano Veneziano

Active Member

Elric

Well-Known Member

Luciano Veneziano

Active Member

Luciano Veneziano

Active Member

Similar Threads

Italian "INSERT multiple rows" via PHP

Well-Known Member

Expert

Well-Known Member

Expert

Well-Known Member

Active Member

Well-Known Member

Well-Known Member

Attachments

Active Member

Well-Known Member

Active Member

Expert

Active Member

Active Member

Active Member

Well-Known Member

Active Member

Active Member

Similar Threads

Privacy & Transparency

Privacy & Transparency