Ir para conteúdo

POWERED BY:

Arquivado

Este tópico foi arquivado e está fechado para novas respostas.

Thiago Lenzi

Limpar memoria PHP após Loops

Recommended Posts

Bom dia senhores.

Tenho 3 arquivos ligados por includes e suas funções são fazer Downloads e Uploads, todos utilizam function em Php7 e são rodados a cada minuto via Cron job.

No entanto, mesmo pensando em performance e evitando o sobrecarregamento do servidor, estou vendo a memória chegar aos 96% de uso. E mesmo quando encerro todos os processos a memória não baixa a carga, fica lá, cheia, por muito tempo.

Portanto, quero saber se existe alguma função que posso colocar no fim do script e limpar toda a memória.

Ps. Como todos os comando são executados via Function, utilizo apena um unset na ultima variável que sobra. Está certo?

Dicas para alta performance de PHP server side serão bem vindas.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Recomendo você verificar quanto tempo o script ta demorando para rodar, pois se ele estiver demorando mais que 1 minuto o cron vai fazer ele rodar de novo sem esperar o anterior terminar.

Sim, você tem toda razão. Neste ponto o servidor está bem servido de recursos e nos dá liberdade para acelerar a produção.

Já o gargalo é a memória, 24 horas de trabalho e 21GB de Memória são atingidos. Esse é o nosso ponto fraco.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Depende muito da rotina executada. O que ela faz? Como ela faz?
Loops não consomem muita memória. Eles consomem CPU.
Vão consumir memória se eles criarem muitas variáveis ou grandes arrays.

Trabalhar os arquivos por blocos de bytes pode ajudar muito, sem ocupar muita memória. Mas não sei dizer se o PHP permite isso. Talvez um simples script shell resolva mais facilmente

Compartilhar este post


Link para o post
Compartilhar em outros sites

Depende muito da rotina executada. O que ela faz? Como ela faz?

Loops não consomem muita memória. Eles consomem CPU.

Vão consumir memória se eles criarem muitas variáveis ou grandes arrays.

Trabalhar os arquivos por blocos de bytes pode ajudar muito, sem ocupar muita memória. Mas não sei dizer se o PHP permite isso. Talvez um simples script shell resolva mais facilmente

Grande Beraldo, recebo suas Newsletters.

Vamos Lá.

Lembrando que este servidor no momento, é dedicado apenas para essa função.

Tenho um banco de dados com aprox. 2.5 Mi de urls para diretórios públicos, onde ali, contém artigos científicos e suas devidas imagens.

O objetivo do script é fazer o Download diretamente para o Wordpress, através de sua API.

Sendo assim, o script se ressume a isso:

<?php
$array_de_url=...//Este array é composto 2 urls para o Posts com imgs a serem atualizadas em nosso repositório.

foreach($array_de_url as $url){

$html = new DOMDocument();//nativo php
$html->loadHtmlFile($url['url']);
$xpath = new DOMXPath($html);//nativo php

//Aqui buscaremos todos os links das imgs que estão na div ciência
$node_img= $xpath->query('//div[@class="science"]/img/@src');
	

     //Aqui ordenaremos as urls e enviaremos para API update Wordpress
     foreach($node_img as $img)	
	{		
		$link_img_science=$img->nodeValue;
                $resposta=updateWordpress($link_img_science,$url['id']);
		if($resposta ===1){
                upaBDupdateIMGscience($url['id']);// Essa Api é a fornecida pelo Wp e manda as informações para fora do Server
                }
		
		
	}

}

// Returns array of all defined variables
$allVars = get_defined_vars(); 
foreach ($allVars as $allVars) { 
unset($allVars); 
}

Não escrevi os selects/updates por serem desnecessários. A API é oficial do Wordpress.

Enfim, não consigo com prender onde a memória é sobrecarregada e, mesmo após o fim dos processos, com o servidor quieto, a memória continua nas alturas.

Compartilhar este post


Link para o post
Compartilhar em outros sites

Se o seu script faz muita coisa, é normal ele ser custoso.

Se a questão toda é sobre uso de memória, uma saída seria utilizar generators. No link abaixo, há o exemplo mais básico de generator para reduzir consumo de memória na leitura de arquivos:

http://php.net/manual/en/language.generators.overview.php#112985

É perceptível que o seu script está carregando em memória, você pode substituir as linhas abaixo:

$html = new DOMDocument();//nativo php
$html->loadHtmlFile($url['url']);
$xpath = new DOMXPath($html);//nativo php

//Aqui buscaremos todos os links das imgs que estão na div ciência
$node_img= $xpath->query('//div[@class="science"]/img/@src');

Por alguma versão usando generator, e apenas chamar no foreach:

foreach(minha_funcao_usando_generators() as $img)	
{		
    $link_img_science=$img->nodeValue;
    $resposta=updateWordpress($link_img_science,$url['id']);
    if($resposta ===1){
        upaBDupdateIMGscience($url['id']);// Essa Api é a fornecida pelo Wp e manda as informações para fora do Server
    }
}

Em teoria, teria uma drástica redução no consumo de memória.

Compartilhar este post


Link para o post
Compartilhar em outros sites

  • Conteúdo Similar

    • Por violin101
      Caros amigos, saudações.
       
      Por favor, me permita tirar uma dúvida com os amigos.

      Tenho um Formulário onde o Usuário digita todos os Dados necessários.

      Minha dúvida:
      --> como faço após o usuário digitar os dados e salvar, o Sistema chamar uma Modal ou mensagem perguntando se deseja imprimir agora ?

      Grato,
       
      Cesar
    • Por Carcleo
      Tenho uma abela de usuarios e uma tabela de administradores e clientes.
      Gostaria de uma ajuda para implementar um cadastro
       
      users -> name, login, passord (pronta) admins -> user_id, registratiom, etc.. client -> user_id, registratiom, etc...
      Queria ajuda para extender de user as classes Admin e Client
      Olhem como estáAdmin
      <?php namespace App\Models; use Illuminate\Database\Eloquent\Factories\HasFactory; use Illuminate\Database\Eloquent\Model; class Admin extends User {     use HasFactory;            protected $fillable = [         'name',         'email',         'password',         'registration'     ];      private string $registration;     public function create(         string $name,          string $email,          string $password,         string $registration     )     {         //parent::create(['name'=>$name, 'email'=>$email, 'password'=>$password]);         parent::$name = $name;         parent::$email = $email;         parent::$password = $password;         $this->registration = $registration;     } } User
      <?php namespace App\Models; // use Illuminate\Contracts\Auth\MustVerifyEmail; use Illuminate\Database\Eloquent\Factories\HasFactory; use Illuminate\Foundation\Auth\User as Authenticatable; use Illuminate\Notifications\Notifiable; use Illuminate\Database\Eloquent\Relations\BelongsToMany; class User extends Authenticatable {     /** @use HasFactory<\Database\Factories\UserFactory> */     use HasFactory, Notifiable;     static string $name;     static string $email;     static string $password;     /**      * The attributes that are mass assignable.      *      * @var list<string>      */     protected $fillable = [         'name',         'email',         'password',     ];          /**      * The attributes that should be hidden for serialization.      *      * @var list<string>      */     protected $hidden = [         'remember_token',     ];     /**      * Get the attributes that should be cast.      *      * @return array<string, string>      */     protected function casts(): array     {         return [             'email_verified_at' => 'datetime',             'password' => 'hashed',         ];     }          public function roles() : BelongsToMany {         return $this->belongsToMany(Role::class);     }       public function hasHole(Array $roleName): bool     {                 foreach ($this->roles as $role) {             if ($role->name === $roleName) {                 return true;             }         }         return false;     }         public function hasHoles(Array $rolesName): bool     {                 foreach ($this->roles as $role) {             foreach ($rolesName as $rolee) {             if ($role->name === $rolee) {                 return true;             }          }         }         return false;     }         public function hasAbility(string $ability): bool     {         foreach ($this->roles as $role) {             if ($role->abilities->contains('name', $ability)) {                 return true;             }         }         return false;     }     } Como gravar um Admin na tabela admins sendo que ele é um User por extensão?
      Tentei assim mas é claro que está errado...
      public function store(Request $request, Admin $adminModel) {         $dados = $request->validate([             "name" => "required",             "email" => "required|email",             "password" => "required",             "registration" => "required"         ]);         $dados["password"] =  Hash::make($dados["password"]);                  $admin = Admin::where("registration",  $dados["registration"])->first();                  if ($admin)              return                    redirect()->route("admin.new")                             ->withErrors([                                 'fail' => 'Administrador já cadastrados<br>, favor verificar!'                   ]);                            $newAdmin = $adminModel->create(                                    $dados['name'],                                    $dados['email'],                                    $dados['password'],                                    $dados['registration']                                 );         dd($newAdmin);         $adminModel->save();         //$adminModel::create($admin);                  return redirect()->route("admin.new")->with("success",'Cadastrado com sucesso');     }  
    • Por violin101
      Caros amigos, saudações.
       
      Gostaria de tirar uma dúvida com os amigos, referente a PDV.
       
      Estou escrevendo um Sistema com Ponto de Vendas, a minha dúvida é o seguinte, referente ao procedimento mais correto.

      Conforme o caixa vai efetuando a venda, o Sistema de PDV já realiza:
      a baixa direto dos produtos no estoque
      ou
      somente após concretizar a venda o sistema baixa os produtos do estoque ?
       
      Grato,
       
      Cesar
       
    • Por violin101
      Caros amigos do grupo, saudações e um feliz 2025.
       
      Estou com uma pequena dúvida referente a Teclas de Atalho.

      Quando o Caps Lock está ativado o Comando da Tecla de Atalho não funciona.
      ou seja:
      se estiver para letra minúscula ====> funciona
      se estiver para letra maiúscula ====> não funciona
       
      Como consigo evitar essa falha, tanto para Letra Maiúscula quanto Minúscula ?

      o Código está assim:
      document.addEventListener( 'keydown', evt => { if (!evt.ctrlKey || evt.key !== 'r' ) return;// Não é Ctrl+r, portanto interrompemos o script evt.preventDefault(); });  
      Grato,
       
      Cesar
    • Por violin101
      Caros amigos, saudações.
       
      Por favor, poderiam me ajudar.

      Estou com a seguinte dúvida:
      --> como faço para para implementar o input código do produto, para quando o usuário digitar o ID o sistema espera de 1s a 2s, sem ter que pressionar a tecla ENTER.

      exemplo:
      código   ----   descrição
           1       -----   produto_A
       
      Grato,
       
      Cesar
×

Informação importante

Ao usar o fórum, você concorda com nossos Termos e condições.