Ajustar algoritmos de ranking sem entender o problema real

Mudar o ranking de um sistema sem identificar a causa raiz do problema é comum na prática. Passei meses ajustando o algoritmo de classificação e só depois percebi que o real desafio tava na seleção dos itens.