こんにちは。
仮想マシンであればWindows Azure管理ポータル上の仮想マシン→<対象の仮想マシン>→「ダッシュボード」タブを選択し、右側に表示される概要欄に記載されたDNS名とパブリック仮想IP(VIP)アドレスを使えばよいかと思います。