Opa, isso mesmo a interface web sobe depois do backend, você pode rodar só o cliente sem usar o docker.
Basta fazer o checkout do projeto no github ollama-webui e executar aquela instalação marota de depedências de um projeto node.
Hoje eu rodo ele assim, tenho um servidor remoto com o ollama e rodo o cliente(ollama-webui) na minha rede local.