ポートが使われていないか確認

lsof -i :<ポート番号> // lsof -i :26789

※ポート番号は任意
> ポート番号は0番～65535番の間で自由に選ぶことができます。
が、うち0番～1023番は既に使用されているport番号である事が多いため、1024~65535番の間でチョイスするのが無難なようです。

ポート番号を変更

vim /etc/ssh/sshd_config

開いたファイルの中の'#Port 22'の部分を'Port26789'に変更。

sshdを再起動

systemctl restart sshd.service
or
service sshd restart

これで、一度exitしてから、再ログインしようとするとポートを指定しないと接続できないようになっています！

※使っているポートを忘れそうなので、秘密鍵でログインできるようにするほうがいいのかも