引っ越しについて

初めまして。いま一軒家で、家族３人で猫を飼ってます。
近い将来、わたしだけが家を出ることにしました。

わたしに、一番なついており、毎晩一緒に寝ています。
猫にとって引っ越しはストレスになってしまうと聞きましたが、わたし１人が突然居なくなることもストレスにならないか心配しています。
いま、引っ越し先に連れていこうか迷っています。ただ、家はいまより狭くなってしまうし、わたしも一日中そばに居てあげることは出来ません。
もう13歳なのでストレスを与えたくないです。

いつも家に帰るとわたしのベッドの上でわたしを待っている子なので、なんだか置き去りにするようで、置いていくのが可哀想な気がしていますが、猫にとって一番どうしたら良いでしょうか？