ですが Windows XP 標準だとアイコンが表示されるだけです。
PowerToys に含まれる Alt-Tab Replacement はウィンドウの中身を縮小表示してくれます。
これで内容を確認しながら切り替えができるようになりました。
▲Top page