{"id":417,"date":"2021-12-02T01:27:48","date_gmt":"2021-12-02T01:27:48","guid":{"rendered":"http:\/\/jplatz.com.br\/syntax\/?p=417"},"modified":"2021-12-02T01:35:04","modified_gmt":"2021-12-02T01:35:04","slug":"php-script-transformando-linhas-de-um-arquivo-em-clausula-sql-in","status":"publish","type":"post","link":"https:\/\/jplatz.com.br\/syntax\/2021\/12\/02\/php-script-transformando-linhas-de-um-arquivo-em-clausula-sql-in\/","title":{"rendered":"PHP Script Transformando Linhas de um Arquivo em Cl\u00e1usula SQL IN"},"content":{"rendered":"\n
php process-file-lines-into-sql-in-clause.php --filename=original-file-with-ids-extracted-from-spreadsheet-column --quotes=none --split=1000<\/pre>\n\n\n\n
Acima a sintaxe de como invocar o script, abaixo o script ele mesmo.<\/p>\n\n\n\n
<?php\nconst HINT_FILENAME = \"php process-file-lines-into-sql-in-clause.php --filename=my-text-file-name.txt\";\nconst HINT_QUOTES = HINT_FILENAME . \" --quotes=double|single|none\";\nconst HINT_SPLIT = HINT_QUOTES . \" --split=1000|none\";\n\n$options = getopt(null, [\"filename:\",\"quotes:\",\"split:\"]);\n\n(!array_key_exists('filename',$options))\n    ? die(\"\\n*** Missing argument --filename *** ... sample of usage:\\n\\n\" . HINT_FILENAME . \"\\n\\n\")\n    : null;\n\n(!array_key_exists('quotes',$options))\n    ? die(\"\\n*** Missing argument --quotes *** ... sample of usage:\\n\\n\" . HINT_QUOTES . \"\\n\\n\")\n    : null;\n\n(!array_key_exists('split',$options))\n    ? die(\"\\n*** Missing argument --split *** ... sample of usage:\\n\\n\" . HINT_SPLIT . \"\\n\\n\")\n    : null;\n\n$filename = $options['filename'];\n$quotes = $options['quotes'];\n$split = $options['split'];\n\nswitch ($quotes) {\n  case \"double\":\n    $quotes = '\"';\n    break;\n  case \"single\":\n    $quotes = \"'\";\n    break;\n  case \"none\":\n  default:\n    $quotes = \"\";\n}\n\n$filename_original_renamed = date('Ymd') . '-source-' . $filename;\n$file_content_rows = file($filename, FILE_IGNORE_NEW_LINES);\n\n$split = is_numeric($split) ? (int)$split : count($file_content_rows);\n$chunks = array_chunk($file_content_rows, $split);\n\necho \"\\n\\nYour file lines are being processed and converted to a string of SQL IN clause\";\necho \"\\nTotal Rows=\" . count($file_content_rows);\necho \"\\n\";\n\n$glue = (empty($quotes)) ? ',' : $quotes . ',' . $quotes;\n\nforeach ($chunks as $chunk => $chunk_rows) {\n    $chunk_label = count($chunks) > 1 ? '-chunk-' . str_pad($chunk+1, 3, '0', STR_PAD_LEFT) : '-lines-' . $split;\n    $filename_processed_renamed = date('Ymd') . '-processed-' . $filename . $chunk_label;\n    $stringifyEmails = $quotes . implode($glue, $chunk_rows) . $quotes;\n    file_put_contents($filename_processed_renamed, $stringifyEmails);\n\n    echo \"\\nFile content processed and save onto a renamed file... \" . $filename_processed_renamed;\n}\n\nrename($filename, $filename_original_renamed);\n\necho \"\\n\\nYour original source file has been renamed to... \" . $filename_original_renamed;\necho \"\\n\\n\";\n<\/pre>\n\n\n\n
Pessoal sem delongas… Sabem quando voc\u00ea tem aquela planilha lotada de IDs que passaram pra voc\u00ea fazer um SQL?<\/p>\n\n\n\n
Pois \u00e9, at\u00e9 d\u00e1 pra formatar na m\u00e3o os IDs como sendo uma lista separadas por v\u00edrgulas e eventualmente recobertos por aspas ou algo assim.<\/p>\n\n\n\n
Mas e se a planilha tiver 100.000 linhas ou mais? E se o SQL que voc\u00ea precisa rodar for na verdade um DML? E se voc\u00ea precisar executar as a\u00e7\u00f5es em volumes menores pra n\u00e3o sobrecarregar o servidor? H\u00e3?<\/p>\n\n\n\n
Pra isso eu desenvolvi este super script Tabajara<\/em> que resolve o seu problema, veja que legal o pocesso.<\/p>\n\n\n\n
Passo 1) copie e cole a coluna de IDs num arquivo texto tipo Brackets<\/strong>, Notepad++<\/strong>, VI<\/strong> ou outro editor qualquer de sua prefer\u00eancia, e salve no disco.<\/p>\n\n\n\n
1140178\n1141171\n1166736\n1177320\n1193872\n1212530<\/pre>\n\n\n\n
Passo 2) execute o script conforme demonstrado no primeiro bloco deste artigo, logo vou explicar as op\u00e7\u00f5es.<\/p>\n\n\n\n
php process-file-lines-into-sql-in-clause.php --filename=original-file-with-ids-extracted-from-spreadsheet-column --quotes=none --split=none<\/pre>\n\n\n\n
Passo 3) colete no pr\u00f3prio diret\u00f3rio os arquivos processados com conte\u00fado no formato SQL IN.<\/p>\n\n\n\n
1140178,1141171,1166736,1177320,1193872,1212530<\/pre>\n\n\n\n
Passo 4) se precisar, colete seu arquivo original que foi renomeado com o termo “source<\/em>“.<\/p>\n\n\n\n
Explicando as op\u00e7\u00f5es do Script<\/strong>:<\/p>\n\n\n\n
  • —filename<\/strong> nome do arquivo fonte contendo os respectivos elementos, sempre 1 por linha<\/li>
  • —quotes<\/strong> deve ser informado um valor entre double|single|none para que elemento seja recoberto por aspas no caso de ser uma string<\/li>
  • —split<\/strong> deve ser informado um valor inteiro com a quantidade de registros m\u00e1ximos a serem gerados no arquivo processado. No caso ser\u00e3o gerados tantos arquivos quanto necess\u00e1rio que ser\u00e3o separados como chunks<\/strong>, contendo sempre a quantidade m\u00e1xima exceto o \u00faltimo que poder\u00e1 conter um volume menor.<\/li><\/ul>\n\n\n\n
    Pronto, voc\u00ea est\u00e1 pronto para copiar a string com os IDs para serem inseridos numa cl\u00e1usula SQL IN. Fique sabendo tamb\u00e9m que exatamente a mesma formata\u00e7\u00e3o para lista do SQL IN<\/strong> serve para criar um array no PHP, basta recobrir com squared<\/strong> brackets<\/strong> [] ao inv\u00e9s de brackets<\/strong> ().<\/p>\n\n\n\n
    Pra finalizar quero citar que o mesmo resultado pode ser alcan\u00e7ado com editores de texto ou IDEs<\/strong> com o aux\u00edlio do mouse e bastante paci\u00eancia.<\/p>\n\n\n\n
    Eu tamb\u00e9m sei que d\u00e1 pra fazer isso com o editor de texto VI<\/strong> usando macro substitui\u00e7\u00f5es, mas eu nunca fiz e n\u00e3o sei fazer, mas eu sei quem sabe!<\/p>\n\n\n\n
    Mas isso \u00e9 assunto para outro artigo!<\/p>\n","protected":false},"excerpt":{"rendered":"
    php process-file-lines-into-sql-in-clause.php –filename=original-file-with-ids-extracted-from-spreadsheet-column –quotes=none –split=1000 Acima a sintaxe de como invocar o script, abaixo o script ele mesmo. <?php const HINT_FILENAME = “php process-file-lines-into-sql-in-clause.php –filename=my-text-file-name.txt”; const HINT_QUOTES = HINT_FILENAME . ” –quotes=double|single|none”; const HINT_SPLIT = HINT_QUOTES . ” –split=1000|none”; $options = getopt(null, [“filename:”,”quotes:”,”split:”]); (!array_key_exists(‘filename’,$options)) ? die(“\\n*** Missing argument –filename *** … sample of usage:\\n\\n” . […]<\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[26,2,3],"tags":[181,180,182,183],"class_list":["post-417","post","type-post","status-publish","format-standard","hentry","category-backend","category-coding","category-php","tag-array_chunk","tag-file","tag-file_put_contents","tag-implode"],"aioseo_notices":[],"_links":{"self":[{"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/posts\/417","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/comments?post=417"}],"version-history":[{"count":2,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/posts\/417\/revisions"}],"predecessor-version":[{"id":420,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/posts\/417\/revisions\/420"}],"wp:attachment":[{"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/media?parent=417"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/categories?post=417"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/jplatz.com.br\/syntax\/wp-json\/wp\/v2\/tags?post=417"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}