Вам необходимо какое-то веб-приложение для отображения документов MS Office в веб-браузере. Современные веб-браузеры могут отображать только файлы PDF, но не все из них.
Одним из таких веб-приложений является Collabora Office Development Edition. https://www.collaboraoffice.com/code/
Обратите внимание, что оно предоставит вам полную возможность совместного редактирования, а не только просмотра . Также обратите внимание, что его совсем нетривиально настроить ... но они, похоже, предлагают контейнер докеров, который должен немного упростить развертывание.