Eu não sei se agora é padrão ou culpa de algum plugin que instalei, mas o Jellyfin tá baixando as legendas sozinho.
É só especificar o idioma nas configurações das bibliotecas e ele faz o resto sozinho. Talvez seja necessário escanear novamente as bibliotecas para as legendas aparecerem.