См. ответ на вопрос № 281220.
Обе формы родительного падежа имеют право на существование в подобных конструкциях.
Приведенные Вами выражения могут встречаться в разговорной речи, но неуместны за ее пределами. Есть употребительное выражение пустой чай. Приведем пример: Ничто не предвещало бедствия, когда, заночевав у Гали после небольшой попойки, я пил пустой чай у нее в комнате (Ю. М. Нагибин).
По логике возможны оба варианта, но на практике употребляют обычно первый.
Допустимо: выпить чая, выпить чаю, выпить (весь) чай. Вариант выпить чаю более употребим в разговорной речи.