Ir para conteúdo

POWERED BY:

Arquivado

Este tópico foi arquivado e está fechado para novas respostas.

Paulo de Tarso F. M.

MySQL: select * from...

Recommended Posts

Olá pessoal!

 

Uma dúvida, tenho uma base de registros com suas 10.000 linhas separadas em 50 e tra-lá-lás colunas. Qual é a melhor forma de montar uma query abaixo de uma forma mais otimizada? O host está enviando avisos de queries lentas, mas eu não sei como resolver...

SELECT * FROM tabela

As tabelas possuem PKs e evito usar o *, especifico todas as colunas que eu quero, mesmo que seja a tabela inteira em algumas situações, mas ainda assim costumo incluir todos os nomes, inclusive para poder usar um alias.

 

Diante disso, que outras boas práticas posso usar para amenizar esse problema? Reforço: preciso exportar a tabela inteira em alguns momentos, isso é fato, mas queria saber se existe alguma forma de melhorar esse processo.

 

Abraço!

Compartilhar este post


Link para o post
Compartilhar em outros sites

Obrigado Alaerte, vou ler os materiais indicados e qualquer coisa volto a escrever.

 

Obs.: Acho que o fórum mais adequado seria de MySQL, né? Não sei porque eu postei em PHP... rsrsrs... Apesar de eu montar os sistemas com PHP, nesse momento a minha dúvida se restringe apenas à questão do banco de dados.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Olha eu voltando com o assunto de otimizações... Alaerte, a criação de índices já foi feita, mas o problema ainda não foi resolvido... :(

 

Eu continuo com o problema de exportar a base inteira via PHP + MySQL, quando se está navegando pelas páginas, ok, a gente consegue paginar os resultados com LIMIT, mas e na hora de exportar a base inteira? Não tem como paginar porque os dados são exportados para um XLS. Então, o que fazer?

 

Hoje essa exportação é feita do jeito "tradicional" mesmo, que seria a query com os campos porém sem o LIMIT, aí o servidor reclama de queries lentas... :huh:

SELECT [campos] FROM [tabela] ORDER BY [id]

É possível executar isso de outra forma menos prejudicial?

 

Abraços

Compartilhar este post


Link para o post
Compartilhar em outros sites

Olá lokaodomau, segue o resultado:

+----+-------------+------------------+------+---------------+-----+---------+-----+------+----------------+  
| id | select_type | table            | type | possible_keys | key | key_len | ref | rows | Extra          |  
+----+-------------+------------------+------+---------------+-----+---------+-----+------+----------------+  
| 1  | SIMPLE      | [nome da tabela] | ALL  |               |     |         |     | 9903 | Using filesort |  
+----+-------------+------------------+------+---------------+-----+---------+-----+------+----------------+  
Essa tabela tem apenas uma chave primária, e ela foi usada no ORDER BY:

EXPLAIN SELECT * FROM [nome da tabela] ORDER BY idregistro;

Compartilhar este post


Link para o post
Compartilhar em outros sites

Normalmente o * nao impacta tanto quanto as clausulas(where) e junções(join).

 

Poderia postar a consulta completa bem como o modelo er do banco?

Compartilhar este post


Link para o post
Compartilhar em outros sites

Olá giesta, então a consulta completa é essa mesma, porque nós temos um sistema padrão no qual a maioiria das queries de exportação são assim, pegando tudo da tabela e ordenando por uma coluna específica.

 

Um detalhe, nem sempre o ORDER BY é pela PK da tabela, pode ser que seja isso... Temos relatórios onde o ORDER BY da exportação é pelo nome, outro pelo e-mail, outro pelo nome da empresa... Todos esses campos precisariam ser indexados? :blink:

 

Peguei uma tabela como exemplo e ela está assim:

CREATE TABLE `2015_visitantes` (
  `idvisitante` int(10) unsigned NOT NULL AUTO_INCREMENT,
  `idioma` varchar(20) DEFAULT '0',
  `categoria` varchar(50) DEFAULT NULL,
  `processo_seletivo` varchar(20) DEFAULT NULL,
  `nome` varchar(100) DEFAULT NULL,
  `cpf` varchar(15) DEFAULT NULL,
  `email` varchar(100) DEFAULT NULL,
  `sexo` varchar(20) DEFAULT NULL,
  `datanasc` date DEFAULT NULL,
  `cep` varchar(20) DEFAULT NULL,
  `endereco` varchar(50) CHARACTER SET latin1 COLLATE latin1_general_ci DEFAULT NULL,
  `numero` varchar(20) DEFAULT NULL,
  `complemento` varchar(50) DEFAULT NULL,
  `bairro` varchar(50) CHARACTER SET latin1 COLLATE latin1_general_ci DEFAULT NULL,
  `cidade` varchar(50) CHARACTER SET latin1 COLLATE latin1_general_ci DEFAULT NULL,
  `estado` varchar(50) DEFAULT NULL,
  `pais` varchar(50) DEFAULT NULL,
  `situacao_inscricao` varchar(30) DEFAULT NULL,
  `situacao_final` varchar(30) DEFAULT NULL,
  `promocode` varchar(15) DEFAULT NULL,
  `historico` text,
  `obs` text,
  `headers` text,
  `datainsc` datetime DEFAULT NULL,
  PRIMARY KEY (`idvisitante`),
  KEY `idx_1` (`cpf`,`processo_seletivo`),
  KEY `idx_2` (`email`,`processo_seletivo`)
) ENGINE=MyISAM AUTO_INCREMENT=20159 DEFAULT CHARSET=latin1;

Compartilhar este post


Link para o post
Compartilhar em outros sites

Uma duvida.

 

A performance da consulta sem Order By é mto superior a consulta com Order By? Para responder não execute uma atras da outra senao ele vai dar hit. De preferencia reset o banco ou a maquina , ou ainda desligue o hit.

 

E respondendo a sua pergunta. Sim. Um indice irá melhorar sensivelmente a performance desde que a ordenação seja pedida pelo mesmo campo do indice.

Fazer um indice para cada caso pode parecer exagerado, mas dependendo do caso pode ser util.

 

Vale lembrar que a presença de um ou mais indices/chaves impacta o tempo inserção de novas linhas.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Não tem nem 10.000... ¬¬

 

Nossas tabelas não costumar ser grandes não, para você entender, trabalhamos com credenciamento de eventos e cada evento possui uma base diferente. Estamos trabalhando em um evento agora no qual recebemos uma base prévia com mais de 400.000 registros, esse foi o maior que vi até hoje, mas é a exceção, a maioria dos eventos não passa de 10.000, 15.000 registros.

Compartilhar este post


Link para o post
Compartilhar em outros sites

todas as consultas estao lentas ou apenas essa?

 

Quantos campos tem nessa coluna? experimente trocar o * por apenas o q vc realmente precisa...

Compartilhar este post


Link para o post
Compartilhar em outros sites

São só essas queries onde temos que exportar a base inteira, de uma maneira geral isso não acontece sempre, é somente quando alguém está acessando a nossa área administrativa e precisa exportar tudo...

 

Bom, tentei executar a query com todas as colunas da tabela ao invés do * e olha só o que aconteceu:

 

Time: 44.682ms
:wacko:

 

Não sei se isso pode influenciar, mas a conexão com a internet aqui na empresa hoje está beeeeeeeem lenta...A mesma query anterior está demorando 34 segundos...

Compartilhar este post


Link para o post
Compartilhar em outros sites

  • Conteúdo Similar

    • Por ILR master
      Tudo bem pessoal?
       
      No código abaixo, estou fazendo uma consulta nas tabelas, banners e banners_referencia
      Meu objetivo é trazer resultados com valores iguais ao nome da cidade declarada na $cidade ou resultados com a referencia Total.
      O problema é que está trazendo todos os resultados. Tenho 10 linhas, 1 com o nome da cidade e duas com o valor Total, então o resultado teria que ser de apenas 3 linhas, mas mostra tudo.
       
      $banner = "SELECT A.*, B.* FROM banners A, banners_referencia B WHERE B.cod_referencia = A.cod_referencia AND A.cidade = '$cidade' OR B.referencia = 'Total' ORDER BY RAND()";
      $banner = mysqli_query($conexao, $banner) or die ("Banner não encontrado");
      while($busca= mysqli_fetch_array($banner)){
          print $busca['cidade'].'<br>';
      };
       
      Alguém consegue me ajudar?
    • Por luiz monteiro
      Olá, tudo bem?
       
      Estou melhorando meu conhecimento em php e mysql e, me deparei com o seguinte. A tabela da base de dados tem um campo do tipo varchar(8) o qual armazena números. Eu não posso alterar o tipo desse campo. O que preciso é fazer um select para retornar o números que contenham zeros a direita ou a esquerda.
      O que tentei até agora
       
      Ex1
      $busca = $conexao->prepare("select campo form tabela where (campo = :campo) ");
      $busca->bindParam('campo', $_REQUEST['campo_form']);
       
      Se a direita da string $_REQUEST['campo_form'] termina ou inicia com zero ou zeros, a busca retorna vazio.
      Inseri dados numéricos, da seguinte maneira para testar: 01234567;  12345670: 12345678: 12340000... entre outros nessa coluna. Todos os valores que não terminam ou não iniciam com zero ou zeros, o select funciona.
       
       
      Ex2
      $busca = $conexao->prepare("select campo form tabela where (campo = 0340000) ");
      Esse número está cadastrado, mas não retorna.
       
      Ex3
      $busca = $conexao->prepare("select campo form tabela where (campo = '02340001' ) ");
      Esse número está cadastrado, mas não retorna.
       
       
      Ex4
      $busca = $conexao->prepare("select campo form tabela where (campo like 2340000) ");
      Esse número está cadastrado, mas não retorna.
       
      Ex5
      $busca = $conexao->prepare("select campo form tabela where (campo like '12340000') ");
      Esse número está cadastrado, mas não retorna.
       
      Ex6
      $busca = $conexao->prepare("select campo form tabela where (campo like '"12340000"' ) ");
      Esse número está cadastrado, mas não retorna.
       
       
      Ex7
      $busca = $conexao->prepare("select campo form tabela where (campo like :campo) ");
      $busca->bindParam('campo', $_REQUEST['campo_form'])
      Não retorna dados.
       
      O  $_REQUEST['campo_form'] é envio via AJAX de um formulário. 
      Usei o gettype para verificar o post, e ele retorna string.
      Fiz uma busca com número 12345678 para verificar o que o select retorna, e também retrona como string.
       
      Esse tipo de varchar foi usado porque os números que serão gravados nesse campo,  terão zeros a direita ou na esquerda. Os tipos number do mysql não gravam zeros, então estou usando esse. O problema é a busca.
      Agradeço desde já.
       
       
    • Por ILR master
      Fala galera, tudo certo?
       
      Seguinte: No servidor A estou tentando fazer uma consulta com o servidor B, mas está dando erro.
      Estou usando o mesmo código de conexão do servidor B que funciona perfeitamente, mas no servidor A, dá erro.
      Segue código:
       
      $host = 'servidor B';
      $user = 'user';
      $pass = '********';
      $db   = 'banco';
       
      // conexão e seleção do banco de dados
      $conexao = mysqlI_connect($host, $user, $pass, $db);
      mysqlI_set_charset($conexao,"utf8");
      //print "Conexão rodando e OK!"; 
      //mysqlI_close($conexao);
       
      Alguém pode me ajudar?
    • Por douglas79
      Bom dia,

      Há alguns dias que venho instalar o apache, o php, mysql e o phpmyadmin manualmente e sem obter sucesso. Até consegui rodar o php, porém, quando vou baixar a úitima versão do MYSQL, não tem todos os pacotes nele instalados, inclusive no completo, só encontro o Router.
      Alguém pode me dizer o porquê que isso está ocorrendo?
      Desde já agradeço a ajuda de vocês, que será bem vinda!
      No aguardo!

      Uso a versão 8.3.9 do PHP
      Meu SO é o Windows 10 32 bits
    • Por landerbadi
      Tenho uma tabela chamada "item" com os seguintes campos: id, name, active. Nela tem cadastrado vários itens. No campo "active" eu coloco a letra "S" para informar que este item está ativo no sistema. Por exemplo: 1, casa, S 2, mesa, S 3, cama, S 4, moto S 5, rádio O quinto registro "radio" não está ativo no sistema pois não tem um "S" no campo active. E outra tabela chamada "product" com os seguintes campos (id, name) com os seguintes registros: 1, Produto A 2, Produto B 3, Produto C E uma terceira tabela chamada "product_item" com os seguintes campos (productID, itemID). No campo productID eu coloco o id de um produto da tabela "product" e no campo "itemID" eu coloco o id do produto da tabela "item". Exemplo: 1, 1 1, 3 1, 4 2, 3 2, 4 Sendo assim o produto A da tabela 'product" comtem os itens casa, cama e moto. Eu preciso fazer uma busca da seguinte maneira:  Eu escolho um registro da tabela "item", por exemplo "casa". Preciso fazer com que o php me liste todos os registros da tabela "product" que contenham a palavra "casa" e que os demais itens estejam ativos no siste. Ou seja, que contenham um "S" no campo "active"  Eu consegui fazer isso da seguinte maneira: SELECT P.id, P.name, GROUP_CONCAT(I.name ORDER BY I.name) AS items FROM product P JOIN product_item PI ON P.id = PI.productID JOIN item I ON I.id = PI.itemID AND I.active = 'S' WHERE P.id NOT IN ( SELECT PI.productID FROM product_item PI JOIN item I ON I.id = PI.itemID WHERE I.active IS NULL ) AND P.id IN ( SELECT PI.productID FROM product_item PI JOIN item I ON I.id = PI.itemID WHERE I.name = 'mesa' ) GROUP BY P.id, P.name; O problema que eu estou tendo é o seguinte:
      Quando eu jogo este código para o banco de dados onde eu já tenho os registros cadastrado o php fica lendo uma eternidade e não lista os produtos.
       
      Usando código no banco de dados que eu fiz para testes ele funciona perfeitamente pois nele tem poucos registros.
       
      No banco de dados principal a tabela "item" tem 11.196 registros. A tabela "product" tem 88.214 registros e a tabela "product_item" tem 518.378 registros. 
       
      Eu acredito que, devido o banco de dados ser muito grande, ele não consegue listar.
       
      Alguém sabe de algum meio de resolver isso?
       
       
×

Informação importante

Ao usar o fórum, você concorda com nossos Termos e condições.