>>174
何もググらずに軽く試してみた

一度何かアイコンを指定したりするとそのフォルダに生成される「desktop.ini」という隠しファイルを開いて、
IconResourceの項目に記述されているアイコンの場所をそのまま相対パスにすればいいっぽい
IconResource=foo.ico
でいけた
「.\」はあってもなくてもいいっぽい

ちなみにdesktop.iniはシステムファイル扱いなので開くのは若干面倒
そのフォルダのアドレスバーに「cmd」って打ち込んでコマンドプロンプトを立ち上げて、desktop.iniと入力してEnterで開くのが楽かな
dあたりまで打ってTabキー押せばdesktop.iniが補完されるし