В поэтической речи отклонения от литературной нормы нередки. Однако сама по себе постановка вопроса "можно ли отклониться" нам кажется неверной. Мы не можем санкционировать ошибки.
Это существительное среднего рода.
Кофе мужского рода в эталонном употреблении и среднего рода в разговорной речи.