Вы правы: на пляже отдыхают, загорают, а купаются в воде. Распространенность сочетания купание на пляже, видимо, можно объяснить тем, что пляж в этом случае широко понимается как в целом место для отдыха, где есть и песок, и какая-то вода (река, море и др.). Представляется, что такое сочетание можно признать допустимым в непринужденной речи, но не в образцовом употреблении.

Подробно об этом см. в "Справочнике по пунктуации".

Обстоятельство по набережной само по себе достаточно конкретно, а потому не нуждается в уточнении, следовательно, обстоятельство вдоль песчаного пляжа не требует обязательного обособления. В то же время это обстоятельство можно считать уточнением (песчаный пляж — часть набережной) и прочитать предложение с соответствующей интонацией. Таким образом, в этом случае постановка запятых факультативна. Сравним подобные примеры, допускающие двоякое прочтение, в учебном пособии А. Ф. Прияткиной «Русский язык: Синтаксис осложненного предложения» (М., 1990): Это случилось в одной гористой местности (,) на юге Италии; На берегах этих рек (,) в глубоких норах (,) живут водяные крысы (с. 75).