Все достаточно просто.

1) Щелкаем правой кнопкой мыши по папке,у которой хотим сменить значок и выбираем пункт свойства(properties)

2) Далее переходим на вкладку настройка(customize) и там жмем кнопку «сменить значок» и выбираем понравившийся нам значок (или указываем свой,если вы заранее скачали значок) Скачать значки можно,допустим, здесь iconsearch.ru (качать иконки нужно с разрешением ICO)

3) Жмем применить, и все готово!