Bei der Deinstallation der 64-Bit Version von Office (auch mit MS Deinstallationstool) bleiben drei Registry-Keys über, die dieses Problem verursachen und gelöscht werden müssen:

für Microsoft Word Previewer
HKEY_CLASSES_ROOT\CLSID\{84F66100-FF7C-4fb4-B0C0-02CD7FB668FE}
für Microsoft Excel Previewer
HKEY_CLASSES_ROOT\CLSID\{00020827-0000-0000-C000-000000000046}
für Microsoft PowerPoint Previewer
HKEY_CLASSES_ROOT\CLSID\{65235197-874B-4A07-BDC5-E65EA825B718}

Quelle: https://blog.kopfteam.de/fehler-bei-vorschau-von-office-dokumenten-im-windows-explorer/