O ideal é desplugar e retirar do gabinete para fazer a limpeza, afinal a sujeira sai da fan e entra no gabinete. Seria um esforço desnecessário, e a poeira é mais prejudicial em outros componentes do seu pc do que na ventoinha em si.
Além disso, o "rolamento" da fan pode ser de variadas...