Чумазая — Женск. к сущ.: чумазый (1*).

Источник: Ефремова Т. Ф. Новый словарь русского языка. Толково-словообразовательный.