O uso cai por causa do v-sync capando os fps em áreas mais leves, normal.Estranho esse uso de GPU cair, deveria se manter acima de 95% o tempo todo no jogo, ele é muito bem otimizado para isso. Especialmente com Ryzen 3600 e memórias tão rápidas quanto essas. Além de 1440p!
Ja ligou a computação assíncrona no arquivo de settings do jogo? Vale a tentativa.