複数のブックを開いているのに、タスクバーには1つしか表示されない
[ツール]→[オプション]→[表示]のタブで[ウィンドウをタスクバーに表示]にチェックしてOKします。

ボタン→[Excelのオプション]→[詳細設定]のタブで[すべてのウィンドウをタスクバーに表示する]にチェックしてOKします。
[ファイル]→[オプション]→[詳細設定]のタブで[すべてのウィンドウをタスクバーに表示する]にチェックしてOKします。
※Excel2013以降ではこの現象は起こりませんので設定もありません。
