как очистить драйвер от мусора?

Глобус, есть пара простых и практичных способов, но "до того, как..." =)

Способ 1
a. Заморозить систему программой типа "Shadow Defender".
b. Установить нужный драйвер и проверить его работоспособность.
c. Сохранить его утилитой для бэкапа драйверов.
d. Перезагрузить ПК с отключением заморозки и установить драйвер с помощью этой же утилиты, или ставить из Диспетчера устройств, указывая папку с сохраненным драйвером.

Способ 2
Использовать виртуальную машину с такой же ОС, аналогичной утилитой сохранить установленный драйвер и после ставить его на рабочую ОС.
Утилиты для сохранения есть в F.A.Q. п.43.
----------------
Программы для бэкапа драйверов, как правило, сохраняют только сам драйвер без сопутствующего мусора, что Вам и требуется.

Если же Вам нужно вычистить мусор после обычной установки, как Вы описали в начале, то это возможно только вручную.
Проведите глобальный поиск файлов и папок в системе по дате и времени установки драйвера, так можно кардинально сузить круг поиска кандидатов на ручное удаление.
После удаления всего ненужного и перезагрузки ПК (это обязательно!) стоит почистить реестр толковым чистильщиком.

Глобус, можно еще попробовать установку из набора SamDrivers, обычно там есть такие драйвера и они без подобного мусора.

Глобус, юзай Driver Backup Solution от Adia - он сохраняет нужные дрова без мусора и в полном комплекте (с необходимыми библиотеками - если они обязательны).