É importante, mas depende. Como gamer, já joguei diversos jogos, desde os mais cinemáticos até os mais simples.
Quando falamos de gráficos, normalmente estamos falando de algo muito abstrato. Ninguém sabe o que realmente é. Vou pegar por exemplo a trilogia mais recente de Tomb Rider. É um jogo com um gráfico de 2011, mas ainda é considerado melhor que muitos jogos mais recentes. Por quê? Porque existe diversas coisas no processo como fotografia, composição e etc...
Com um tempo eu cheguei a conclusão que gráfico é realmente uma métrica maluca inventada na comunidade. Death Stranding é mais realista, certo? As vezes é fácil confundir os personagens com pessoais reais, mas ao mesmo tempo outros jogos menos realistas são bonito.
O ponto chave é o que você mencionou, conceito artistíco. Alguns são realmente mais realista no em diversos aspectos, como personagens, flora e etc... Por falar em flora, The Witcher 2 tem uma das melhores floras do mundo dos jogos, e não diria que é realista, mas ainda é muito bonito.
Por fim vou pegar um jogo que eu realmente levo para o coração que é Dark Souls III. Não é o forte do jogo ter um realismo como os outros. O jogo é muito imersivo em sua temática Dark Fantasy.As vezes o jogo sequer parece estar em HD (ao menos na minha resolução). Apesar disso, não é um jogo considerado feio. Reforçando ainda mais o quão relativo é o argumento "gráfico".