Иконки в окнах обычно хранятся в файлах DLL или EXE.
См. Где найти большинство собственных значков Windows 10? для некоторых примеров.
Вы можете использовать бесплатный ресурсный хакер Ангуса Джонсона, чтобы извлечь и сохранить иконки в соответствующий файл .ico.