Это исключение, написание надо запомнить.
Вы правы, несогласованные определения, выраженные инфинитивом, обычно не обособляются, они образуют вместе с именем существительным словосочетание. См. параграф 60 полного академического справочника «Правила русской орфографии и пунктуации» под ред. В. В. Лопатина.
Не любую лексическую избыточность следует считать ошибкой. Такие сочетания, как подняться вверх, спуститься вниз, корректны, зафиксированы словарями русского языка, используются в художественной литературе.
Если имеются в виду люди с этим знаком зодиака, то употребление слова Весы как одушевленного существительного вполне допустимо: Я люблю Весов.
Остававшееся до недавнего времени нормативным написание Пулицеровская премия (сейчас кодифицировано написание Пулитцеровская премия) отвечает правилам англо-русской практической транскрипции, согласно которым английское буквосочетание tz передается русской буквой ц, ср. Фицджеральд при Fitzgerald. Фамилия Pulitzer также часто передавалась как Пулицер.
Основному правилу соответствует такой вариант: Хочешь верь, хочешь нет — это твоё право, при этом допускается постановка запятой и тире как единого знака: Хочешь верь, хочешь нет, — это твоё право.
Тире в предложении Хочешь — верь, хочешь — нет возможно. Однако в составе всего приведенного Вами предложения такую пунктуацию следует признать неудачной, так как предложение с тремя тире будет плохо восприниматься.
Слово волнительный в соответствующем значении зафиксировано в словарях (с пометой разговорное).
Это оборот собственно русский. Слово свет употребляется здесь в значении 'земля со всем существующим не ней, мир, вселенная', а клин – 'маленький участок земли малоземельного крестьянина'. Первоначальный смысл оборота свет не клином сошелся такой: «земля широка, просторна, представляет большие возможности для какой-либо деятельности». А широко известная песенная строка на тебе сошелся клином белый свет – утверждение огромной значимости любимого человека для лирического героя (все мысли замыкаются на любимом человеке, подобно тому как весь мир сходится на маленьком клочке земли).