Запятая нужна. Д. Э. Розенталь пишет: «Не является объединяющим элементом противительный союз, после которого или перед которым находятся два соединенных союзом и простых предложения, поэтому запятая перед и ставится: Ибрагим был бы очень рад избавиться, но ассамблея была дело должностное, и государь строго требовал присутствия своих приближенных...»

Да, его действительно можно считать сложносочиненным. Хотя понятие однородных сказуемых никто не отменял, чаще всего однородные сказуемые усматривают там, где присутствует соединительный или разделительный союз, а противительный союз почему-то считают показателем сложного предложения.

В реальности перед нами один из бесконечного множества случаев, когда в конструкции можно с равным успехом видеть как простое предложение с однородными сказуемыми, так и сложносочиненное предложение. Во втором случае вторая часть представляет собой неполное двусоставное с опущенным подлежащим.

Такая двойственная интерпретация, вообще говоря, считается допустимой для ВСЕХ предложений с однородными сказуемыми.

Запятая в указанных позициях ставится: противительный союз но, после которого находятся два соединенных союзом и простых предложения, не является объединяющим их элементом. См. примечание 2 к параграфу 30.2 справочника по пунктуации Д. Э. Розенталя.

Лучше (наречие, сравнительная степень) меньше (наречие, сравнительная степень), да (союз, противительный) лучше (наречие, сравнительная степень). Если использовать классификацию по частям речи, в которой в качестве отдельной части речи выделяется категория состояния (предикативы, безлично-предикативные слова), то получится так: Лучше (категория состояния, сравнительная степень) меньше  (наречие, сравнительная степень), да (союз, противительный) лучше (наречие, сравнительная степень).

Если относить слова категории состояния (предикативы, безлично- предикативные слова) к предикативным наречиям и добавить информацию о разряде наречия, то получится так: Лучше (предикативное наречие, сравнительная степень) меньше  (наречие образа действия, сравнительная степень), да (союз, противительный) лучше (наречие образа действия, сравнительная степень).

Кроме того, для понимания структуры предложения стоит отметить, что предложение является неполным, в нем пропущен инфинитив со значением типа делать, купить, набрать и т. п., который вместе с предикативным лучше входит в состав главного члена этого безличного предложения: Лучше (делать и т. п.) меньше, да лучше.

Противительный союз, после которого или перед которым находятся два соединенных союзом и простых предложения, не считается объединяющим элементом, и запятая перед и ставится (см. примечание 2  к параграфу 30.2 справочника по пунктуации Д. Э. Розенталя): Да, это долгое лирическое отступление, и я мог вас утомить, но оно здесь не зря.

Поскольку после ряда поясняющих приложений находится противительный союз но, перед ним должна быть поставлена запятая, а второе тире ставить не нужно (см. примечание 1 к параграфу 19.10 справочника по пунктуации Д. Э. Розенталя): Ученый как-то сказала, что не может понять, что они такое — государство-нация, религия или корпорация, но они явно умеют действовать как все три.

Да, запятую надо поставить. Противительный союз, после которого или перед которым находятся два соединенных союзом и простых предложения, не является объединяющим элементом, поэтому запятая перед и ставится.

Корректно: Например, ребенок хочет всеми командовать и, когда нужно переключиться на другую роль, не может этого сделать. Союз и соединяет однородные составные сказуемые хочет командовать и не может сделать. С двух сторон выделяется придаточная часть когда нужно переключиться на другую роль.

Противительный союз (однако), после которого или перед которым находятся два соединенных союзом и простых предложения, общим элементом не является, поэтому запятая перед и ставится: Однако дела идут плохо и тебе придется раскошелиться.

Ваши сомнения вполне оправданны, и вызваны они тем, что сочинительный союз и здесь неуместен. Между частями нужен противительный союз но: Переговоры шли непросто, но, хотя участникам встречи не удалось сблизить позиции, некоторый прогресс был достигнут.