Não tem como acessar a ONU.
Se você tiver um roteador pessoal possa ser que consiga, aqui no meu router tem a opção de reiniciar em horarios especificos durante a semana, essa seria uma saida temporária, pois ao reiniciar o IPv4 será teocado
Ja tentou ver se a rota até o Ip do jogo está mudando?
Possa ser que esteja indo por outra rota mais longa e causando o aumento de latência.
Pode ser a prioridade no QOS da Brisanet, quando estiver com a latência alta tenta baixar algum arquivo longo e em seguida entra no jogo pra verificar a latência, se abaixar então é apenas o QOS ou a controladora Nat priorizando os trafegos na rede.