В основном у иконок идет расширение "ico" но и есть "png".

1. Если вы скачали на свой компьютер иконки с расширением "png", то это расширение можно конвертировать в "ico" с помощью программы "Aveiconifler".

Aveiconfler- программа очень простая, работает в один клик мыши.

Как пользоваться :

• Перетаскиваем пару иконок или папку с иконками с расширением "png" в левую колонку под цифрой <1>.
• А вот уже с с правой  колонки под цифрой <2> мы забираем готовые "ico" иконки, после чего мы перетаскиваем на рабочий стол или удобную для вас папку и можем их устанавливать на папки.

Далее:

• Жмем правым кликом мыши по папке которую хотим изменить, в выпадающим окне выбираем "Свойства" и в появившимся окне в верхней части выбираем вкладку "Настройки" в этом вкладке внизу нажимаем на "Сменить значок"  и там уже выбираем директорию куда вы вытащили готовые "ico" иконки и ставим их.

2. Есть множество программ и утилит, которые способны менять все иконки на вашем компьютере разом.

Приведу в пример программу: IconPackager.

IconPackager- очень проста в использовании, в один клик изменяет вид всем вашим папкам, которые только есть на вашем компьютере.

Как пользоваться: 

1. В нижней части программы , есть уже выбор стандартных пак иконок далее выбираем тот пак который вам понравился и жмем " Apply Icon Package".

А так же можно загрузить еще очень много интересных и красивых  пак иконок, для это нужно в этой программе нажать по вкладке "Add Icon Package" и после чего выбрать "Download".

Скачать: IconPackager 5.0