A vantagem de usar mosh ao invés do ssh comum são várias:

• Não tem o lag que ssh tem em conexões ruins.
• Pode-se trocar de wi-fi pra 3G e continuar conectado.
• Pode ser iniciado por usuários comuns, não é um daemon como o ssh.
• Se a conexão cair você não perde a sessão, ela entra em espera até a conexão voltar.

Se estiverem interessados: https://mosh.org/

Pra fazer o procedimento você vai precisar de:

• Termux.
• Facilidade com CLI.
• Metade de um cérebro funcional.

Instale o termux através da Play Store ou do F-Droid e prossiga, no smartphone:

Instalar o mosh:

pkg install mosh

Criar uma senha, ela será somente para conexão remota.

passwd

Iniciar o servidor mosh:

sshd
mosh-server

Descobrir o IP local do aparelho:

ifconfig

Se estiver conectado via wi-fi, o IP estará na conexão wlan0. Agora partindo para o computador, instale o mosh na sua distribuição e faça:

mosh --ssh="ssh -p 8022" ip-smartphone

A troca da porta padrão é necessário, pois o termux não usa a porta 22 padrão. O processo é válido para o contrário também, para acessar o computador através do smartphone.