Этот знак препинания - авторский.

Начинать предложение с союза вовсе не запрещено. Однако такое построение текста должно быть стилистически оправданным: при помощи подобного приема пишущий намеренно членит связный текст на составляющие его части, с целью подчеркивания, например, эмоционального состояния субъекта речи, логического выделения деталей из общей картины и т. п. См.: Джинсы, твидовый пиджак и хорошая рубашка. Очень хорошая. Моя любимая! Белая. Обычная белая рубашка. Но любимая. Я надел её… и отправился встречать Макса (Е. Гришковец. Рубашка). 

См. также 314489

См. также 295594

См. также 278562

См. также 276893

«Но» относится к раздельному написанию вместо слитного.

С пунктуацией при сочетании опять же ситуация непростая. См. в нашем «Справочнике по пунктуации»:

ОПЯТЬ ЖЕ, вводное слово (в начале предложения или части сложного предложения)

Служит отсылкой к сказанному прежде, указывает на связь между предложениями; то же, что «в добавление к сказанному, к тому же, кроме того». Интонационно отделяется от последующих слов. (...)

Опять же, у мужа Катерины фельшар есть ― друг-приятель ― так он мне лекарствия дает. Ф. Решетников, Тетушка Опарина. Вот я что думаю – не покажусь я им сразу. Издаля, по-тихому присмотрюсь. Опять же, соседа вызову, посовещаемся. Г. Владимов, Верный Руслан. Опять же, ведь и не быть тебе в Чердыни весь век, всё равно увезут… А. Иванов, Сердце Пармы.

При отсутствии интонационного выделения, а также при употреблении не в начале предложения (или части сложного предложения) слова «опять же» не являются вводными и не обособляются.

Опять же только начальство знало, что из этого получится, а начальством являлись Саша и Вадик. А. Гладилин, Прогноз на завтра. Но самих сторублевок они опять же не видели... А. Рыбаков, Тяжелый песок. Гнедые бывают. Карабахские ишаки опять же… А альбинос – это феномен. М. Веллер, Белый ослик. Знаешь эти хитрые тракторы «Беларусь»? Тут тебе и экскаватор, тут тебе и бульдозер, и тяговая сила опять же. В. Аксенов, Пора, мой друг, пора. Похоже на войну, только опять же на войну ночную с редкой перестрелкой... В. Астафьев. Пролетный гусь.

@ В текстах конца 19-го – начала 20-го века слова «опять же» в начале предложения часто отделялись двоеточием. И опять же: голос его был такой, что просился в душу… К. Станюкович, На другой галс. Опять же: в бога не веровала… ни тебе помолится, ни тебе перекрестится… М. Горький, Мещане.

Более корректно грамматически было бы перестроить предложение: включая случаи (...), но не ограничиваясь ими. Если такое невозможно, предпочтителен творительный падеж: включая, но не ограничиваясь случаями... См. также ответ на вопрос 244550.

Да, точка ставится после закрывающих кавычек, если перед ними она употреблена в качестве знака, обозначающего сокращение слова.

Мы согласны с Вами: на море – существительное с предлогом. Даже в «Словарь наречий и служебных слов русского языка» (М., 2005), в котором наречие понимается довольно широко, сочетание на море не включено.

Да, в таком задании форма ед. числа должна быть сохранена. 

Согласно справчнику Д. Э. Розенталя, «обычно в этих случаях именительный падеж указывает на устойчивый признак предмета, на постоянно присущую ему качественную характеристику, а творительный падеж указывает на временный признак». То есть в данном случае предпочтительно: Людмила Васильевна была не просто учителем, но и исследователем, инженером, психологом, публицистом.

Однако это разграничение не всегда последовательно, и первый вариант также нельзя назвать полностью ошибочным.

Да, у иностранных фамилий окончание творительного падежа -ом. Правильно: Колобовом.