Duplicação no banco de dados mysql

[Walter De Albuquerque Filho 0]

Galera seguinte exemplo 
Eu gero um arquivo audit de jogos e tenho um script php que pega o arquivo e importa pro mysql
ai exemplo arquivo Audit da data 01/01/2018 ate 05/01/2018 ai quando o faço jogo de novo no dia 06 por exemplo eu peço pra gerar do dia 01/01/2018 ate 06/01/2018 ai o que acontece ao invés dele só adicionar o dia 06 ele esta importando os dias 01/02/03/04/05 e duplicando os dados como fazer pra ele pegar só os novos dados do arquivo?
 

	//conecta com o banco de dados
	function connect(){	
		$retorno = 0;	
		$conn = new mysqli($this->db_host, $this->db_user, $this->db_password, $this->database);		
		if ($conn->connect_error) {	
			echo "=====================================\n";
		    echo "Connection failed:\n" . $conn->connect_error."\n";
			echo "Erro ao conectar com o banco de dados.\n";
		}else{
			$this->conn=$conn;
			$retorno = 1;	
		}
		return $retorno;
	}



//busca os csvs da pasta e importa
    function list_csv(){
        $files = glob("*.csv");
        $retorno = 0;
        foreach($files as $file) {
            if (($handle = fopen($file, "r")) !== FALSE) {
                $n=0;
                $titulo    ="";
                while (($data = fgetcsv($handle, 4096, ",")) !== FALSE) {
                    if($n==0){
                        $titulo = explode("'",implode("\t", $data)."''''")[1];
                    }
                    if($n>2){
                        
                        $sql="";
                        $d = DateTime::createFromFormat('Y/m/d h:i A', $data[0]);
                        $data[0]= $d->format('Y-m-d')."@|,@|".$d->format('H:i:s');
                        $data[9]=str_replace(",","",$data[9]);
                        
                        $buy = explode("Buy-In:",$data[3]."Buy-In: ");
                        $data[3] = $buy[0]."@|,@|".$buy[1];
                        
                        
                        
                        
                        $pos = strpos(str_replace("$","<",$data[2]),"<");                        
                        if(!$pos === false){
                            $data[2] = substr($data[2],0,$pos)."@|,@|".substr($data[2],$pos);        
                        }else{
                            $data[2]=$data[2]."@|,@|";
                        }
                        $sql_tmp = str_replace("'","\\'",implode("@|,@|", $data));
                        $sql.=str_replace("@|","'",$sql_tmp);
                        $sql = "insert into audit values('".$titulo."','".$sql."');";
                        //echo $sql."\n";
                        $this->connect();
                        if (!$this->conn->query($sql) === TRUE) {
                            echo "Error: " . $sql . "<br>" . $this->conn->error;                
                        }else{
                            $retorno = 1;
                        }
                    }
                      $n++;
                }                
                
                fclose($handle);
            } else {
                echo "Could not open file: " . $file;
            }            
                
            

        }        
        array_map('unlink', glob("*.csv"));
        return $retorno;
    }

 

[Walter De Albuquerque Filho 0]

alguem?

[Gabriel Heming 766]

Qual é o parâmetro para dizer que o jogo está repetido?

[Walter De Albuquerque Filho 0]

como assim man?

 

[Gabriel Heming 766]

Existe algum código, descrição ou conjunto de dados que informa que você utiliza para saber se um registro está repetido ou não?

[Walter De Albuquerque Filho 0]

Eu sei porque eu vou no banco de dados e olho

[Gabriel Heming 766]

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

 

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

[Walter De Albuquerque Filho 0]

13 minutos atrás, Gabriel Heming disse:

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

 

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

nick

Data

Hora

Action

id

Table Name / Player / Tournament #

Game

Buy-In

Account Currency

Amount

Accrued StarsCoin

T Money

W Money

Balance

Total Accrued StarsCoin After this Transaction

T Money1

W Money1

[Walter De Albuquerque Filho 0]

essas são as minhas colunas vários campos delas vem valores repetidos ate mesmo no ID então eu teria que colocar restrições a coluna DATA HORA ACTION e ID  que se o valores dessas quatros colunas forem iguais pra não adicionar

[Gabriel Heming 766]

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele. 

 

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela> 
  add unique index <nome_do_index> (<nome_da_coluna>);

Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

• Nome da tabela: mytable;
• Nome do index: id_uqx;
• Nome da coluna: id.

alter table mytable 
  add unique index id_uqx (id);

 

[Walter De Albuquerque Filho 0]

23 minutos atrás, Gabriel Heming disse:

É exatamente isso que eu gostaria de saber, o que é que você olha para dizer que está duplicado.

 

Pois, no banco de dados, você pode adicionar restrições para que o registro não duplique.

CREATE TABLE `audit` (
  `nick` varchar(150) DEFAULT NULL,
  `Date/Time` timestamp NULL DEFAULT NULL,
  `Action` varchar(30) DEFAULT NULL,
  `id` varchar(100) NOT NULL,
  `Table Name / Player / Tournament #` varchar(1000) DEFAULT NULL,
  `Game` varchar(250) DEFAULT NULL,
  `Account Currency` char(3) DEFAULT NULL,
  `Amount` decimal(20,2) DEFAULT NULL,
  `Accrued StarsCoin` varchar(10) DEFAULT NULL,
  `T Money` decimal(20,2) DEFAULT NULL,
  `W Money` decimal(20,2) DEFAULT NULL,
  `Balance` decimal(20,2) DEFAULT NULL,
  `Total Accrued StarsCoin After this Transaction` decimal(20,2) DEFAULT NULL,
  `T Money1` decimal(20,2) DEFAULT NULL,
  `W Money1` decimal(20,2) DEFAULT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

este é o meu bd

[Gabriel Heming 766]

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele. 

 

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela> 
  add unique index <nome_do_index> (<nome_da_coluna>);

Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

• Nome da tabela: mytable;
• Nome do index: id_uqx;
• Nome da coluna: id.

alter table mytable 
  add unique index id_uqx (id);

 

[Walter De Albuquerque Filho 0]

1 minuto atrás, Gabriel Heming disse:

Id é uma abreviação de identificador (identification) e eles devem ser únicos. Adicione a restrição a ele. 

 

O que você deve adicionar é um INDEX do tipo UNIQUE. O comando é o seguinte:

alter table <nome_da_tabela> 
  add unique index <nome_do_index> (<nome_da_coluna>);

Substitua os valores que estão dentro das chaves pelos valores solicitados, por exemplo:

• Nome da tabela: mytable;
• Nome do index: id_uqx;
• Nome da coluna: id.

alter table mytable 
  add unique index id_uqx (id);

 

o meu ID não é gerado automático e sim pelo sistema ele somente importa os dados e tem vários valores relacionado ao mesmo id ai sim costa vários ID's com o mesmo valor

[Gabriel Heming 766]

Você precisa encontrar um valor ou um conjunto de valores que, quando juntos, não podem ser repetidos. Sem isso, é praticamente impossível evitar a duplicação.

[Walter De Albuquerque Filho 0]

sim eu tenho um conjunto de valores que juntos não serão idênticos, como faço isto?

[Gabriel Heming 766]

Separe as colunas por vírgula:

alter table <nome_da_tabela> 
  add unique index <nome_do_index> ( <nome_da_coluna_1> , <nome_da_coluna_2> , <nome_da_coluna_3> );

[Walter De Albuquerque Filho 0]

preciso colocar entre <>? e este Index seria por exemplo oque?

[Gabriel Heming 766]

Não, conforme descrito aqui:

 

[Walter De Albuquerque Filho 0]

alter table 'audit' 
  add unique index 'id_uqx' ( 'nick' , 'Data' , 'Hora' , 'Action' , 'id' , 'Table Name / Player / Tournament #' , 'Game' , 'Buy-In' , 'Account Currency' , 'Amount' , 'Accrued StarsCoin'  );

assim man?

[Gabriel Heming 766]

Se essa são todas as colunas que juntas não podem repetir, é isso mesmo.