Ir para conteúdo

POWERED BY:

Arquivado

Este tópico foi arquivado e está fechado para novas respostas.

clickanapolis

Pegar informações publicas em um site

Recommended Posts

Pessoal bom dia. Hoje me surgiu a necessidade de puxar dados de um site acessando o mesmo pelo endereço.

 

pesquisando na internet achei esse codigo que me transformou o codigo em string:

 

$url = 'https://sigaa.sistemas.ufg.br/sigaa/public/curso/alunos.jsf?lc=pt_BR&id=69670744';

$dadosSite = file_get_contents($url);

echo $dadosSite;

Minha duvida agora é como a partir de um determinado lugar ele armazenar linha a linha.

No site deles usam tabela do html:

 

<table  id="table_lt" cellpadding="0" cellspacing="0">
					<tr  class="campos">
						<td  width="100px" class="colMatricula">Matr&iacute;cula</td>
						<td>Aluno</td>
					</tr>
		
					
					<tr class="linhaPar">
						<td  class="colMatricula">201404484</td>
						<td>ADRIANA MARIA TEREZA</td>
					</tr>	
					
					<tr class="linhaImpar">
						<td  class="colMatricula">201104587</td>
						<td>ADRIANO APARECIDO DA SILVA LIMA</td>
					</tr>	
					
					<tr class="linhaPar">
						<td  class="colMatricula">201406360</td>
						<td>ALDO SOARES DA MOTA</td>
					</tr>	
					
</table>

sempre a partir da segunda coluna ate a ultima eu precisava armazenar no banco de dados, pois hoje faço crtl + c e crtl + v para o excel e depois faço a importação o que esta dando muito trabalho.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Você vai precisar utilizar regex, mais especificamente o preg_match_all(), com ele você consegue pegar o conteúdo de acordo com o que você especificar no regex, exemplo bem simples:

$string = "<table  id=\"table_lt\" cellpadding=\"0\" cellspacing=\"0\">
					<tr  class=\"campos\">
						<td  width=\"100px\" class=\"colMatricula\">Matr&iacute;cula</td>
						<td>Aluno</td>
					</tr>
		
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201404484</td>
						<td>ADRIANA MARIA TEREZA</td>
					</tr>	
					
					<tr class=\"linhaImpar\">
						<td  class=\"colMatricula\">201104587</td>
						<td>ADRIANO APARECIDO DA SILVA LIMA</td>
					</tr>	
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201406360</td>
						<td>ALDO SOARES DA MOTA</td>
					</tr>	
					
</table>";

preg_match_all("/<td.*>(.*)<\/td>/", $string, $match);

echo "<pre>";
print_r($match);
echo "</pre>";

Vai retornar:

Array
(
    [0] => Array
        (
            [0] => Matrícula
            [1] => Aluno
            [2] => 201404484
            [3] => ADRIANA MARIA TEREZA
            [4] => 201104587
            [5] => ADRIANO APARECIDO DA SILVA LIMA
            [6] => 201406360
            [7] => ALDO SOARES DA MOTA
        )

    [1] => Array
        (
            [0] => Matrícula
            [1] => Aluno
            [2] => 201404484
            [3] => ADRIANA MARIA TEREZA
            [4] => 201104587
            [5] => ADRIANO APARECIDO DA SILVA LIMA
            [6] => 201406360
            [7] => ALDO SOARES DA MOTA
        )

)

Como você vai puxar todo o conteúdo completo de uma página, o seu regex vai precisar ser muito mais específico do que esse que criei, uma boa opção é utilizar essas class css pra identificar no regex: class="linhaPar" | class="linhaImpar"

Compartilhar este post


Link para o post
Compartilhar em outros sites

Agora minha minha segunda duvida. Pegando esse array a posição tipo [2] e matricula a [3] nome a [4] matricula a [5] nome e assim por diante.

 

Como voce acha que faço para gravar assim no meu banco já que meu banco e assim

 

id

matricula

nome

 

então tinha que gravar a linha [2] e [3] no mesmo cadastro.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Você faz um novo array pra reorganizar os dados dos "matriculados" antes de jogar ele no banco de dados, exemplo:

ps: aproveitei e melhorei o regex:

<?php


$string = "<table  id=\"table_lt\" cellpadding=\"0\" cellspacing=\"0\">
					<tr  class=\"campos\">
						<td  width=\"100px\" class=\"colMatricula\">Matrícula</td>
						<td>Aluno</td>
					</tr>
		
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201404484</td>
						<td>ADRIANA MARIA TEREZA</td>
					</tr>	
					
					<tr class=\"linhaImpar\">
						<td  class=\"colMatricula\">201104587</td>
						<td>ADRIANO APARECIDO DA SILVA LIMA</td>
					</tr>	
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201406360</td>
						<td>ALDO SOARES DA MOTA</td>
					</tr>	
					
</table>";

preg_match_all("/<tr.*class=\"(linhaPar|linhaImpar)\">.*<td.*>(.*)<\/td>.*<td>(.*)<\/td>.*<\/tr>/sU", $string, $match);

$qtd_matricula = $match[2];

for ($i=0; $i < count($qtd_matricula); $i++) { 
	$array_matriculas[] = array(
							"numero_matricula" => $match[2][$i],
							"nome_matriculado" => $match[3][$i]
						);
}
echo "<pre>";
print_r($array_matriculas);
echo "</pre>";
?>

vai retornar um array mais organizado:

Array
(
    [0] => Array
        (
            [numero_matricula] => 201404484
            [nome_matriculado] => ADRIANA MARIA TEREZA
        )

    [1] => Array
        (
            [numero_matricula] => 201104587
            [nome_matriculado] => ADRIANO APARECIDO DA SILVA LIMA
        )

    [2] => Array
        (
            [numero_matricula] => 201406360
            [nome_matriculado] => ALDO SOARES DA MOTA
        )

)

Agora como tem um novo regex, você pode fazer assim também, de uma forma mais direta sem precisar construir um novo array pra reorganizar:

<?php


$string = "<table  id=\"table_lt\" cellpadding=\"0\" cellspacing=\"0\">
					<tr  class=\"campos\">
						<td  width=\"100px\" class=\"colMatricula\">Matrícula</td>
						<td>Aluno</td>
					</tr>
		
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201404484</td>
						<td>ADRIANA MARIA TEREZA</td>
					</tr>	
					
					<tr class=\"linhaImpar\">
						<td  class=\"colMatricula\">201104587</td>
						<td>ADRIANO APARECIDO DA SILVA LIMA</td>
					</tr>	
					
					<tr class=\"linhaPar\">
						<td  class=\"colMatricula\">201406360</td>
						<td>ALDO SOARES DA MOTA</td>
					</tr>	
					
</table>";

preg_match_all("/<tr.*class=\"(linhaPar|linhaImpar)\">.*<td.*>(.*)<\/td>.*<td>(.*)<\/td>.*<\/tr>/sU", $string, $match);

$qtd_matricula = $match[2];

for ($i=0; $i < count($qtd_matricula); $i++) { 
	$numero_matricula = $match[2][$i];
	$nome_matriculado = $match[3][$i];
	[...insere no banco]
}
?>

 

Compartilhar este post


Link para o post
Compartilhar em outros sites

Bruno funcionou, eu criei uma tabela onde estou gravando todos os links.

 

ai fiz um while o codigo ficando assim:

 

include"../includes/conexao.php";

$sql = mysqli_query($con, "select * from turma_importacao order by nome ASC");

while($vetor = mysqli_fetch_array($sql)) {

$url = $vetor['link'];

$dadosSite = file_get_contents($url);

preg_match_all("/<td.*>(.*)<\/td>/", $dadosSite, $match);

preg_match_all("/<tr.*class=\"(linhaPar|linhaImpar)\">.*<td.*>(.*)<\/td>.*<td>(.*)<\/td>.*<\/tr>/sU", $dadosSite, $match);


$qtd_matricula = $match[2];

for ($i=0; $i < count($qtd_matricula); $i++) { 

	$array_matriculas[] = array(
							"numero_matricula" => $match[2][$i],
							"nome_matriculado" => $match[3][$i]
						);
						
	

}

$f = 0;
foreach($array_matriculas as $matricula) {

$matricula = $array_matriculas[$f][numero_matricula];
$nome = $array_matriculas[$f][nome_matriculado];

$sql_grava = mysqli_query($con, "insert into boot (id_turma, matricula, nome) VALUES ('$vetor[id]', '$matricula', '$nome')");


$f++;

}


}

o problema é que quando executa o segundo link ele esta duplicando o cadastro do primeiro com o id do segundo.

Compartilhar este post


Link para o post
Compartilhar em outros sites

  • Conteúdo Similar

    • Por violin101
      Caros amigos, saudações.
       
      Por favor, me permita tirar uma dúvida com os amigos.

      Tenho um Formulário onde o Usuário digita todos os Dados necessários.

      Minha dúvida:
      --> como faço após o usuário digitar os dados e salvar, o Sistema chamar uma Modal ou mensagem perguntando se deseja imprimir agora ?

      Grato,
       
      Cesar
    • Por Carcleo
      Tenho uma abela de usuarios e uma tabela de administradores e clientes.
      Gostaria de uma ajuda para implementar um cadastro
       
      users -> name, login, passord (pronta) admins -> user_id, registratiom, etc.. client -> user_id, registratiom, etc...
      Queria ajuda para extender de user as classes Admin e Client
      Olhem como estáAdmin
      <?php namespace App\Models; use Illuminate\Database\Eloquent\Factories\HasFactory; use Illuminate\Database\Eloquent\Model; class Admin extends User {     use HasFactory;            protected $fillable = [         'name',         'email',         'password',         'registration'     ];      private string $registration;     public function create(         string $name,          string $email,          string $password,         string $registration     )     {         //parent::create(['name'=>$name, 'email'=>$email, 'password'=>$password]);         parent::$name = $name;         parent::$email = $email;         parent::$password = $password;         $this->registration = $registration;     } } User
      <?php namespace App\Models; // use Illuminate\Contracts\Auth\MustVerifyEmail; use Illuminate\Database\Eloquent\Factories\HasFactory; use Illuminate\Foundation\Auth\User as Authenticatable; use Illuminate\Notifications\Notifiable; use Illuminate\Database\Eloquent\Relations\BelongsToMany; class User extends Authenticatable {     /** @use HasFactory<\Database\Factories\UserFactory> */     use HasFactory, Notifiable;     static string $name;     static string $email;     static string $password;     /**      * The attributes that are mass assignable.      *      * @var list<string>      */     protected $fillable = [         'name',         'email',         'password',     ];          /**      * The attributes that should be hidden for serialization.      *      * @var list<string>      */     protected $hidden = [         'remember_token',     ];     /**      * Get the attributes that should be cast.      *      * @return array<string, string>      */     protected function casts(): array     {         return [             'email_verified_at' => 'datetime',             'password' => 'hashed',         ];     }          public function roles() : BelongsToMany {         return $this->belongsToMany(Role::class);     }       public function hasHole(Array $roleName): bool     {                 foreach ($this->roles as $role) {             if ($role->name === $roleName) {                 return true;             }         }         return false;     }         public function hasHoles(Array $rolesName): bool     {                 foreach ($this->roles as $role) {             foreach ($rolesName as $rolee) {             if ($role->name === $rolee) {                 return true;             }          }         }         return false;     }         public function hasAbility(string $ability): bool     {         foreach ($this->roles as $role) {             if ($role->abilities->contains('name', $ability)) {                 return true;             }         }         return false;     }     } Como gravar um Admin na tabela admins sendo que ele é um User por extensão?
      Tentei assim mas é claro que está errado...
      public function store(Request $request, Admin $adminModel) {         $dados = $request->validate([             "name" => "required",             "email" => "required|email",             "password" => "required",             "registration" => "required"         ]);         $dados["password"] =  Hash::make($dados["password"]);                  $admin = Admin::where("registration",  $dados["registration"])->first();                  if ($admin)              return                    redirect()->route("admin.new")                             ->withErrors([                                 'fail' => 'Administrador já cadastrados<br>, favor verificar!'                   ]);                            $newAdmin = $adminModel->create(                                    $dados['name'],                                    $dados['email'],                                    $dados['password'],                                    $dados['registration']                                 );         dd($newAdmin);         $adminModel->save();         //$adminModel::create($admin);                  return redirect()->route("admin.new")->with("success",'Cadastrado com sucesso');     }  
    • Por violin101
      Caros amigos, saudações.
       
      Gostaria de tirar uma dúvida com os amigos, referente a PDV.
       
      Estou escrevendo um Sistema com Ponto de Vendas, a minha dúvida é o seguinte, referente ao procedimento mais correto.

      Conforme o caixa vai efetuando a venda, o Sistema de PDV já realiza:
      a baixa direto dos produtos no estoque
      ou
      somente após concretizar a venda o sistema baixa os produtos do estoque ?
       
      Grato,
       
      Cesar
       
    • Por violin101
      Caros amigos do grupo, saudações e um feliz 2025.
       
      Estou com uma pequena dúvida referente a Teclas de Atalho.

      Quando o Caps Lock está ativado o Comando da Tecla de Atalho não funciona.
      ou seja:
      se estiver para letra minúscula ====> funciona
      se estiver para letra maiúscula ====> não funciona
       
      Como consigo evitar essa falha, tanto para Letra Maiúscula quanto Minúscula ?

      o Código está assim:
      document.addEventListener( 'keydown', evt => { if (!evt.ctrlKey || evt.key !== 'r' ) return;// Não é Ctrl+r, portanto interrompemos o script evt.preventDefault(); });  
      Grato,
       
      Cesar
    • Por violin101
      Caros amigos, saudações.
       
      Por favor, poderiam me ajudar.

      Estou com a seguinte dúvida:
      --> como faço para para implementar o input código do produto, para quando o usuário digitar o ID o sistema espera de 1s a 2s, sem ter que pressionar a tecla ENTER.

      exemplo:
      código   ----   descrição
           1       -----   produto_A
       
      Grato,
       
      Cesar
×

Informação importante

Ao usar o fórum, você concorda com nossos Termos e condições.