Publicado em 22 de mar.

Duplicação no banco de dados mysql

Galera seguinte exemplo

Eu gero um arquivo audit de jogos e tenho um script php que pega o arquivo e importa pro mysql

ai exemplo arquivo Audit da data 01/01/2018 ate 05/01/2018 ai quando o faço jogo de novo no dia 06 por exemplo eu peço pra gerar do dia 01/01/2018 ate 06/01/2018 ai o que acontece ao invés dele só adicionar o dia 06 ele esta importando os dias 01/02/03/04/05 e duplicando os dados como fazer pra ele pegar só os novos dados do arquivo?

//conecta com o banco de dados

	function connect(){
 $retorno = 0;
 $conn = new mysqli($this->db_host, $this->db_user, $this->db_password, $this->database);
 if ($conn->connect_error) {
 echo "=====================================\n";
 echo "Connection failed:\n" . $conn->connect_error."\n";
 echo "Erro ao conectar com o banco de dados.\n";
 }else{
 $this->conn=$conn;
 $retorno = 1;
 }
 return $retorno;
	}

//busca os csvs da pasta e importa

    function list_csv(){
        $files = glob("*.csv");
        $retorno = 0;
        foreach($files as $file) {
            if (($handle = fopen($file, "r")) !== FALSE) {
                $n=0;
                $titulo    ="";
                while (($data = fgetcsv($handle, 4096, ",")) !== FALSE) {
                    if($n==0){
                        $titulo = explode("'",implode("\t", $data)."''''")[1];
                    }
                    if($n>2){
                        
                        $sql="";
                        $d = DateTime::createFromFormat('Y/m/d h:i A', $data[0]);
                        $data[0]= $d->format('Y-m-d')."@|,@|".$d->format('H:i:s');
                        $data[9]=str_replace(",","",$data[9]);
                        
                        $buy = explode("Buy-In:",$data[3]."Buy-In: ");
                        $data[3] = $buy[0]."@|,@|".$buy[1];
                        
                        
                        
                        
                        $pos = strpos(str_replace("$","<",$data[2]),"<");                        
                        if(!$pos === false){
                            $data[2] = substr($data[2],0,$pos)."@|,@|".substr($data[2],$pos);        
                        }else{
                            $data[2]=$data[2]."@|,@|";
                        }
                        $sql_tmp = str_replace("'","\\'",implode("@|,@|", $data));
                        $sql.=str_replace("@|","'",$sql_tmp);
                        $sql = "insert into audit values('".$titulo."','".$sql."');";
                        //echo $sql."\n";
                        $this->connect();
                        if (!$this->conn->query($sql) === TRUE) {
                            echo "Error: " . $sql . "<br>" . $this->conn->error;                
                        }else{
                            $retorno = 1;
                        }
                    }
                      $n++;
                }                
                
                fclose($handle);
            } else {
                echo "Could not open file: " . $file;
            }            
                
            

        }        
        array_map('unlink', glob("*.csv"));
        return $retorno;
    }

Discussão (19)

Entre ou cadastre-se para participar da discussão

Entrar Criar conta

Walter De Albuquerque Filho· 22 de mar.

alguem?

Gabriel Heming· 22 de mar.

Qual é o parâmetro para dizer que o jogo está repetido?

Walter De Albuquerque Filho· 22 de mar.

como assim man?

Gabriel Heming· 22 de mar.

Existe algum código, descrição ou conjunto de dados que informa que você utiliza para saber se um registro está repetido ou não?

Walter De Albuquerque Filho· 22 de mar.

Eu sei porque eu vou no banco de dados e olho

Gabriel Heming· 22 de mar.

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

Walter De Albuquerque Filho· 22 de mar.

13 minutos atrás, Gabriel Heming disse:

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

nick

Data

Hora

Action

Table Name / Player / Tournament #

Game

Buy-In

Account Currency

Amount

Accrued StarsCoin

T Money

W Money

Balance

Total Accrued StarsCoin After this Transaction

T Money1

W Money1

Walter De Albuquerque Filho· 22 de mar.

essas são as minhas colunas vários campos delas vem valores repetidos ate mesmo no ID então eu teria que colocar restrições a coluna DATA HORA ACTION e ID que se o valores dessas quatros colunas forem iguais pra não adicionar

Gabriel Heming· 22 de mar.

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele.

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela>
 add unique index <nome_do_index> (<nome_da_coluna>);

	Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

-
Nome da tabela: mytable;

-
Nome do index: id_uqx;

-
Nome da coluna: id.

alter table mytable
 add unique index id_uqx (id);

Walter De Albuquerque Filho· 22 de mar.

23 minutos atrás, Gabriel Heming disse:

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

CREATE TABLE `audit` (
 `nick` varchar(150) DEFAULT NULL,
 `Date/Time` timestamp NULL DEFAULT NULL,
 `Action` varchar(30) DEFAULT NULL,
 `id` varchar(100) NOT NULL,
 `Table Name / Player / Tournament #` varchar(1000) DEFAULT NULL,
 `Game` varchar(250) DEFAULT NULL,
 `Account Currency` char(3) DEFAULT NULL,
 `Amount` decimal(20,2) DEFAULT NULL,
 `Accrued StarsCoin` varchar(10) DEFAULT NULL,
 `T Money` decimal(20,2) DEFAULT NULL,
 `W Money` decimal(20,2) DEFAULT NULL,
 `Balance` decimal(20,2) DEFAULT NULL,
 `Total Accrued StarsCoin After this Transaction` decimal(20,2) DEFAULT NULL,
 `T Money1` decimal(20,2) DEFAULT NULL,
 `W Money1` decimal(20,2) DEFAULT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

	este é o meu bd

Gabriel Heming· 22 de mar.

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele.

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela>
 add unique index <nome_do_index> (<nome_da_coluna>);

	Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

-
Nome da tabela: mytable;

-
Nome do index: id_uqx;

-
Nome da coluna: id.

alter table mytable
 add unique index id_uqx (id);

Walter De Albuquerque Filho· 22 de mar.

1 minuto atrás, Gabriel Heming disse:

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele.

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela>
 add unique index <nome_do_index> (<nome_da_coluna>);

 Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

-
Nome da tabela: mytable;

-
Nome do index: id_uqx;

-
Nome da coluna: id.

alter table mytable
 add unique index id_uqx (id);

  

	o meu ID não é gerado automático e sim pelo sistema ele somente importa os dados e tem vários valores relacionado ao mesmo id ai sim costa vários ID's com o mesmo valor

Gabriel Heming· 22 de mar.

Você precisa encontrar um valor ou um conjunto de valores que, quando juntos, não podem ser repetidos. Sem isso, é praticamente impossível evitar a duplicação.

Walter De Albuquerque Filho· 22 de mar.

sim eu tenho um conjunto de valores que juntos não serão idênticos, como faço isto?

Gabriel Heming· 22 de mar.

Separe as colunas por vírgula:

alter table <nome_da_tabela>
 add unique index <nome_do_index> ( <nome_da_coluna_1> , <nome_da_coluna_2> , <nome_da_coluna_3> );

Walter De Albuquerque Filho· 22 de mar.

preciso colocar entre <>? e este Index seria por exemplo oque?

Gabriel Heming· 22 de mar.

Não, conforme descrito aqui:

Walter De Albuquerque Filho· 22 de mar.

alter table 'audit'
 add unique index 'id_uqx' ( 'nick' , 'Data' , 'Hora' , 'Action' , 'id' , 'Table Name / Player / Tournament #' , 'Game' , 'Buy-In' , 'Account Currency' , 'Amount' , 'Accrued StarsCoin' );

	assim man?

Gabriel Heming· 23 de mar.

Se essa são todas as colunas que juntas não podem repetir, é isso mesmo.