O canal do YouTube Hardware Accent, ao tentar comparar o desempenho de jogos no Windows e no Linux, deparou-se com um problema fundamental que põe em cheque a validade de muitos benchmarks populares.
O experimento foi conduzido no Dead Space Remake. Primeiro, o criador de conteúdo iniciou o jogo no Windows, ativando simultaneamente dois programas populares de monitoramento de desempenho: MSI Afterburner + CapFrameX e o programa integrado do driver AMD Adrenalin Software.
Na mesma cena estática, onde um personagem simplesmente permanecia parado, olhando para uma grande ventoinha, as leituras dos programas diferiram drasticamente.
O MSI Afterburner reportou um desempenho médio de cerca de 298 FPS, com um valor mínimo de 1% (eventos raros) de 152 FPS. Enquanto isso, o programa da AMD reportou uma média de 270 FPS. Uma diferença tão grande no valor mínimo de 1%, crucial para a fluidez do jogo, torna impossível uma avaliação objetiva do desempenho.
A situação ficou ainda mais reveladora ao mudar para o Linux (a distribuição Bazzite, muito semelhante ao SteamOS). Lá, foram utilizados o utilitário MangoHud e o contador de desempenho integrado do Steam para as medições. No mesmo ambiente, o MangoHud mostrou uma média estável de 308-311 FPS, enquanto o nível 1% low ficou em torno de 167-171 FPS.
Subjetivamente, segundo o autor, o jogo pareceu mais fluido no Linux, e o gráfico de taxa de quadros estava visivelmente mais suave do que no Windows. No entanto, o contador de desempenho integrado do Steam retornou resultados completamente absurdos após a medição, registrando uma média de 8,8 FPS, o que finalmente confirmou a natureza caótica e pouco confiável dos métodos de medição de software.
O autor concluiu que, se diferentes programas não conseguem chegar a um resultado consistente mesmo dentro do mesmo sistema operacional, então comparar dados obtidos no Windows usando o MSI Afterburner e no Linux usando o MangoHud é fundamentalmente falho.
Segundo o YouTuber, o único método verdadeiramente confiável continua sendo a análise de fluxo de vídeo usando placas de captura, como feito pela equipe editorial da Digital Foundry, que, infelizmente, não está disponível para a maioria dos usuários.
