No dia 8 de maio de 1889, Van Gogh se apresenta para tratamento no asilo Saint-Paul-de-Mausole em Saint-Rémy, perto de Arles. Durante o primeiro mês, não é permitido que ele saia do perímetro, mas dentro de suas paredes fica um grande jardim com pinheiros, que se provam ser uma ótima fonte de inspiração para novos estudos e elementos.
Para O Jardim do Asilo em Saint-Rémy, Van Gogh escolhe um ponto de vista não usual, ao lado da parede do hospital. Graças ao caminho diagonal com banco de pedra, a pintura adquire um efeito particularmente espacial. Os arbustos repletos de flores e as árvores são retratados em um emaranhado de pinceladas grossas. Apesar da grande variedade de formas e cores, a composição tem tanto profundidade quanto estrutura.
Em setembro do ano anterior, Van Gogh escreve de Arles para sua irmã Wil sobre o que as cores significam para ele: “Nós precisamos de boas alegrias e felicidade, esperança e amor. Quanto mais feio, velho, ranzinzo, doente e pobre que eu fico, mais eu quero me vingar ao usar cores brilhantes, bem arrumadas, resplandecentes”.