時々SSHセッションを開くことができないのはなぜですか？

私はsshをたくさん使っているので、サーバーに接続するためのキーのパスワードだけを入力して~/.ssh/config入力するようにファイルに「myhost」を設定しました。ssh myhost通常はサーバーに接続するだけですが、時にはこのコマンドを入力した後にパスワードを入力する必要もなく、sshが中断されて新しい行（Enter）のみを印刷することもあります。

これがサーバーのパフォーマンスの問題ですか、それとも私の問題ですか？修正できますか？