Puoi semplicemente aprire il gestore di pacchetti, cercare il termine font tra i pacchetti installati ed eliminare quelli che non ti servono e che non sono dipendenze per alcun programma installato.
Se i caratteri che non ti servono sono all'interno di un pacchetto che contiene font utili a te o richiesti come dipendenza, allora non puoi fare molto se non eliminarli a mano dalle cartelle di sistema, ma non penso ne valga la pena.