В обоих случаях местоимение свой употреблено корректно.
Это сочетание часто употребляется в последнее время, оно перестало быть новым, необычным, непривычным, что, по нашему мнению, и дает основания не заключать его в кавычки.
Корректно: святая гора Афон, Святая гора.
Скорее всего, просто шутливая рифма. В. И. Даль поясняет: Досталася (достается и) гадине виноградина - говорится о замужестве.
Следует, правда, пояснить, что у Даля "гадина ж. или гад м. ползучее животное, пресмыкающееся, противное человеку; это земноводное либо насекомое, собств. земноводное; их четыре отдела: змея, лягушка, черепаха, ящерица. || Бран. мерзавец, сквернавец".
Правильно: побывать в святых местах.
Запятая не ставится, поскольку сравнительный оборот входит в состав сказуемого.
Предложение корректно.