Rücktrittbremsen sind mit langen Abfahrten überfordert. Wo soll bei dem winzigen Teil die Wärme hin? Das Fett wird heiß und fangt irgendwann zum Rauchen an.
Dafür hat man normalerweise auch zwei Bremsen, daß man beide nutzt

Falsch Bremsen kann aber auch bei Felgenbremsen zu bösen Stürzen führen, wenn hier dauergebremst - anstatt Intervallgebremst wird. Ergebnis kann im schlimmsten Fall ein Reifenplatzer sein.
Nachdem die Schaltung und die Bremse noch funktionieren, ist weiter nichts schlimmes passiert. Mittelfristig würde ich aber mal eine Nabenwartung machen, daß das Fett auf dem Bremskörper erneuert wird.