家庭内で複数のパソコンを使用するためのネット接続方法とは？

現在は、デスクトップを1台ネットに接続して使用しています。
ADSL回線です。
調べようにも単語がわからなくて、知りたいことにぴったりの検索がなかなかできません・・・＾＾；
なんとなく雰囲気とイメージは少しだけわかりましたが、
正確に理解できていないので、よろしくお願いします。

現在のモデムの裏側は、LANケーブル（というのでしょうか？）パソコンとモデムがつながっている線の挿入口はひとつしかありません。
なので、きっと、このモデムを買い換える、もしくは追加で必要な機器がある。ということだと思っています。

現在のデスクトップの他にノートPCを購入しました。
ネットの接続手順にワイヤレス通信キーを押して云々と書かれていて、
本体に貼られているシールに11/b/g/nと書いてあるので、無線LANが使用可能になれば、
ノートPCはすぐにネットに接続できる状況だと思っているのですが、間違っていたらご指摘ください。

希望：現在のデスクトップはこのまま現状と同じように自室で使用。
それに加えて、ノートPCも使用したい。
一番ノートPCを使うのは、デスクトップのある部屋の壁一枚隣の部屋なので、
有線LANでその部屋で使用するようにしてもいいのですが、
可能なら家の中ならどこでも使える。というのが一応希望です。

このノートPCを線を挿せばもちろん使えるが、挿さなくても無線LANで家中使える。
2環境が同時に存在するということは可能なのでしょうか？？

無線LANにすると、
例えば部屋が5つあって、各部屋で同時にネットを使用できる。ということになるのでしょうか。

わかりやすいサイトなどがあればそれを読んで勉強するのでそのような回答でももちろんかまいません。
よろしくお願いします。