ネット回線契約速度アップは得？

現状ネットの実測値（スピード測定サイト平均値）は約２３MGほどです。 契約はJCOM・CATV４０MGコースです。この上に１６０MGコースってのもあります。 さて、契約スピードを上げるとサイト観覧がほんとに早くなるのでしょうか？ たとえばとあるリンク先をクリックした時なかなか応答しない時とかありますよね？ テレビでお店や商品が紹介された途端、その会社のHPがなかなか開かない （混んでる？）時ってありますよね？ ＊そういう部分が早くなるのかどうかをお聞きしたいのですが？ 現状ネット動画などそのサイトに繋がってしまえば観覧に支障があるわけでは ありません。 簡単に言えばHPの応答速度も上がるか？と言うことなんです。 素人考えでは相手のサーバー処理能力がネックとなると思うのですが まちがえでしょうか？ 宜しくご教授お願い致します。