Aparentemente isso é problema cronico desse conector USB 3.0 (3.2 gen1).....A ancoragem da carcaça plástica é nos próprios pinos, diferente de outros conectores que tem uma ancoragem melhor.....
Assim, o jeito é vc tentar segurar a parte que fica na placa mãe com uma mão e remover o conector com a outra
Em um vídeo, o cara recomenda vc ir puxando o cabo pros lados devagar pra assim não puxar junto a peça plástica.....Diferente de puxar o cabo reto, como normalmente se faz
Porta SATA por exemplo, tem 2 pinos soltados pra ancorar ela na placa mãe
Mas já rolou comigo de puxar o conector de uma FAN e a trava de plástico da placa mãe vir junto