Transportando dados entre aplicativos.

Os arquivos de valores separados por vírgula (CSV) são uma maneira de transferir dados entre aplicativos. Bancos de dados como MySQL e software de planilhas como o Excel oferecem suporte à importação e exportação por CSV, para que você possa usar arquivos CSV para trocar dados entre os dois.

Os arquivos CSV são texto simples, portanto são naturalmente leves e fáceis de exportar do MySQL.

Do servidor de banco de dados

Se você tiver acesso ao servidor em que o MySQL está sendo executado, poderá exportar uma seleção com o comando EM OUTFILE comando.

ID SELECT, coluna1, coluna2 FROM tabela INTO OUTFILE '/tmp/mysqlfiles/table.csv' CAMPOS TERMINADOS POR ',' CERCADO POR '"' LINHAS TERMINADAS POR ' n'

Isso produzirá um arquivo CSV para /tmp/mysqlfiles/table.csvou onde quer que você o configurou. Você precisa garantir que o usuário executando o MySQL (geralmente mysql ou raiz) possui propriedade e acesso de gravação ao diretório.

Você também precisa garantir que o secure_file_priv A configuração permite que o MySQL acesse esse diretório. Por padrão, isso bloqueia o acesso de leitura e gravação de consultas SQL. Isto é uma coisa boa; se o seu código estiver vulnerável à injeção de SQL, qualquer invasor em potencial só teria acesso ao MySQL, e não ao restante do sistema de arquivos.

Você pode colocar listas de permissões em diretórios específicos editando seu arquivo de configuração do MySQL (geralmente localizado em /etc/my.cnf) incluir:

(mysqld) secure-file-priv = "/ tmp / mysqlfiles"

O que permitirá ao MySQL ler e gravar em / tmp / mysqlfiles / (que você precisará criar com mkdir) Depois que o MySQL puder exportar arquivos, você poderá executar a consulta e gerar arquivos CSV.

Com o CERCADO POR configuração, as vírgulas serão escapadas corretamente, por exemplo:

"3", "Escape, this", "also, this"

O qual você pode obter e importar diretamente para qualquer programa de planilha ou outro software.

Planilha de uma lista separada por vírgula.

Lembre-se de que o arquivo CSV exportado não inclui títulos de coluna, mas as colunas estarão na mesma ordem que o arquivo SELECT declaração. Além disso, valores nulos serão exportados como N, que é o comportamento esperado, mas se você quiser alterar isso, poderá modificar a seleção envolvendo ifnull (campo, "") em torno de seus campos no seu SELECT declaração.

Da linha de comando do MySQL

Se você tiver apenas acesso de linha de comando à instância do MySQL e não acessar o próprio servidor (como quando não for gerenciado por você, no caso de Amazon RDS), o problema é um pouco mais complicado. Enquanto você pode usar CAMPOS TERMINADOS POR ',' no servidor para gerar uma lista separada por vírgulas, a CLI do MySQL se separará com guias por padrão.

Basta digitar uma consulta na linha de comando e canalizá-la para um arquivo:

mysql -u root -e "seleciona * do banco de dados;" > output.tsv

Como a saída do MySQL é separada por tabulações, isso é chamado de arquivo TSV, para "valores separados por tabulações", e pode funcionar no lugar do seu arquivo CSV em alguns programas, como importações de planilhas. Mas não é um arquivo CSV, e a conversão para um é complicado.

Você pode simplesmente substituir cada guia por uma vírgula, o que funcionaria, mas causaria uma falha se houver vírgulas nos dados de entrada. Se você tem 100% de certeza de que não há vírgulas no seu arquivo TSV (verifique com grep), você pode substituir as guias por sed:

sed "s / t /, / g" output.tsv> output.csv

Mas se você tiver vírgulas nos seus dados, precisará usar um muito mais regex:

sed "s / '/ ' /; s / t / ", "/ g; s / ^ / " /; s / $ / "/; s / n // g" output.tsv > output.csv

Isso escapará adequadamente dos campos com aspas, o que resolverá o problema de vírgula.

Nota: o caractere de tabulação t é não é padrão. No macOS e no BSD, ele não está disponível, o que leva a uma confusão de todos os "t" minúsculos, causando sed para inserir vírgulas erradas. Para resolver isso, você precisará usar um caractere de tabulação literal no lugar de t:

sed "s / /, / g" output.tsv> output.csv

Se seus dados de entrada contiverem guias, você não terá sorte e precisará gerar um arquivo CSV com uma linguagem de script.

Faça manualmente com uma linguagem de programação real

O MySQL (e a maioria dos bancos de dados) foi desenvolvido para interagir com você; portanto, você provavelmente já tem algum tipo de linguagem de programação conectada ao MySQL. A maioria dos idiomas também pode gravar em disco, para que você possa criar seus próprios scripts de saída CSV lendo os campos diretamente do banco de dados, escapando-os adequadamente e gravando um arquivo delimitado por vírgula.

Um exemplo em Python.

Adicione ao Google Notícias
Neste artigo
  1. Do servidor de banco de dados
  2. Da linha de comando do MySQL
  3. Faça manualmente com uma linguagem de programação real