Da ich selbst länger danach gesucht habe, möchte ich hier kurz beschreiben, wie man die Synchronisierung des Onedrive-Ordners mit dem Online-Pendant manuell anstößt.
Um die Synchronisierung zu starten muss die Onedrive-App (also die Modern UI App) über das Startmenü gestartet werden.
Klickt dann auf den Schriftzug Alle Dateien sind auf dem aktuellen Stand. (bzw. je nach Status anders) in der oberen rechten Ecke.
Auf dem folgenden Bildschirm solltet ihr eine Schaltfläche namens Synchronisieren finden. Klickt darauf und die Synchronisierung sollte gestartet werden.