Шаблон замены расширения параметра zsh анализирует строку по-разному, если ввод является переменной, а не встроенным.

Как вы поняли, пакет называется msstcorefonts -installer в Alpine.

После установки выдается предупреждение:

• With root permissions run "update-ms-fonts" and once completed
• run "fc-cache -f" in order to update the font cache

Вот рабочий пример Dockerfile:

FROM alpine:latest
RUN apk --no-cache add msttcorefonts-installer fontconfig && \
    update-ms-fonts && \
    fc-cache -f

Для установки кэша fc -требуется пакет fontconfig. Я не уверен, что это строго необходимо.