Sim, é possível, mas pode causar uma confusão tremenda dependendo da forma que você fizer e dos ambientes que você resolver instalar lado a lado.
O processo básico (que eu considero mais recomendável), é você pesquisar e descobrir quais seriam os pacotes essenciais para uma instalação mínima do ambiente gráfico ou do gerenciador de janelas que você quer e instalá-los (com o apt install, mesmo).
A maioria dos gerenciadores de janelas exige apenas um pacote mais alguns utilitários para configurações específicas, o que não costuma causar problemas -- com os ambientes gráficos mais completos (Gnome e KDE Plasma), a coisa pode ser mais complicada.
As abordagens automatizadas por "metapacotes", ou até pelo programa tasksel, além de serem limitadas aos ambientes mais populares e completos, também podem causar problemas, já que instalam tudo em excesso -- o que você precisa e o que você não precisa, e é por isso que eu corro dessa alternativa!