Как я понял, PNG - для Висты, потому что под XP у меня не получилось их применить. А ICO можно поставить следующим образом: Свойства папки -> Настройка -> Сменить значёк... и указываешь путь к ico. Можно, наверное, как то и массово сдлать, но я не увлекался данным вопросом.