フレームを使ったレイアウトから卒業したいのですが・・

フレームを使ったレイアウトから卒業したいのですが、
フレームではメイン画面とサイドバー等が切り離されているので、サイドバーの項目を簡単に変えることができたのですが、
ボックスを使って画面を分割した場合、
サイドバー等の項目を変える場合、
すべてのページのサイドバーの内容を変更しなくてはならないのですか？
それでは大変なので、何か方法があるのだと思いますが、どうか教えてください。