Azure Virtual Machinesでdebianを作成して、
(作成する時にSSH public keyではなく、ユーザー名、パスワードを選択して入力)
画面上部のCloud Shellのアイコンをクリックすると接続できた。
Azure Virtual Machine にSSH接続する方法のメモ – Azure Cloud Shell と putty と VS Code – zoe log
Cloud ShellでサーバへのSSH接続もできる。
CloudShellはAzureAD上のユーザーごとに割り当てられる。
起動したタイミングでAzureADでの認証も完了する
Azure CloudShellをつかってみる - Qiita
SSHで接続するには、
$ ssh ユーザー名@IPアドレス して、yes して、パスワードを入力
ユーザー名はvm作成時に作成したユーザー名、IPアドレスは、vmのPublic IP address