Вы правы: на пляже отдыхают, загорают, а купаются в воде. Распространенность сочетания купание на пляже, видимо, можно объяснить тем, что пляж в этом случае широко понимается как в целом место для отдыха, где есть и песок, и какая-то вода (река, море и др.). Представляется, что такое сочетание можно признать допустимым в непринужденной речи, но не в образцовом употреблении.
Глагол купаться шире по значению. «Большой толковый словарь русского языка» под ред. С. А. Кузнецова определяет его так: погружаясь в воду, обмываться, плавать, плескаться. Так что на речке можно и купаться, и плавать.
Слово вообще-то может выделяться запятыми как вводное. Однако при противопоставлении предложений или частей предложения запятые не ставятся, ср.: Я вообще-то не люблю купаться, но в такую жару хочется окунуться. См. в «Справочнике по пунктуации».
Корректно заключить название в кавычки: искупаться можете в «Аквафоруме».