Zuerst habe ich Umbraco direkt auf Azure installiert. Leider erhält man so eine leicht veraltete Version. Der Upgrade-Pfad auf Azure ist mir nicht ganz klar. Am Schluss erhielt ich den Fehler 'No physical template file was found for template Home'. Da ich beim Installationsprozess ein Template gewählt hatte, musste ich alle Files im Verzeichnis Views zum Projekt hinzufügen (habe auch js und css hinzugefügt), damit sie deployed werden.
Jetzt kann es losgehen mit Umbraco lokal und auf Azure.