La risposta Marcus Adams ha anche una scorciatoia da tastiera: Ctrl + Alt + End. È necessario essere a schermo intero e/o avere la sessione RDP impostata su Applicare combinazioni di tasti Windows sul computer remoto. Questo invia efficacemente un Ctrl + Alt + Alt + Del al computer remoto (quindi è utile saperlo anche per altre occasioni/usi). Da lì, come diceva Marcus, si può arrivare a Riavviare, Spegnere, ecc. dall'icona del piccolo pulsante rosso di accensione in basso a destra.
In alternativa, si può cliccare una volta sul Desktop (o sulla barra delle applicazioni) del computer remoto, poi premere Alt + F4 e si ottiene il pop-up vecchio stile con tutte le opzioni di spegnimento nel menù a tendina.
Aggiornamento: come indicato nei commenti, Ctrl + Alt + Fine in Windows 10 vi dà solo l'opzione di Disconnessione. Non è possibile riavviare o spegnere da lì. Inoltre non riesco a trovare un'opzione di sicurezza di Windows nel menu Start… Ma non preoccupatevi, come detto il** Alt + F4 metodo funziona ancora , e lo uso esclusivamente ora (io remoto per il lavoro ogni giorno, e anche gestire più macchine a casa).