Приложение — это компонент, главная функция которого состоит в дополнительной характеристике определяемого слова. Эта дополнительная характеристика может носить уточняющий характер, может служить указанием на особую важность предмета в каком-либо отношении (старейшая газета России в Вашем примере), может называть классифицирующий признак предмета (летопись в Вашем примере) и др. Поэтому ориентироваться разумнее не на различные попытки вывести правила разграничения приложений и определяемых слов, которые содержатся в различных пособиях, но не охватывают и не могут охватить всего разнообразия смысловых и прочих отношений в конструкциях с приложениями, а на этот главный признак: то, что служит дополнительной характеристикой, и является приложением.

Как Вы уже поняли, никаких реальных ограничений на то, чтобы главное слово было собственным наименованием в кавычках, не существует. Безусловно, бывает, что такое название как раз и служит приложением (кафе «Березка»), но из этого нельзя выводить никакого правила.

Когда имеется обособление, решать, конечно, проще: в обоих Ваших примерах обособленные компоненты и являются приложениями.
 

Язык меняется, и орфография тоже меняется. Действующие «Правила русской орфографии и пунктуации» были утверждены в 1956 году. Когда писали наши классики (Гоголь, Островский и другие), не существовало единого общеобязательного свода правил русского правописания. Поэтому для ответа на вопрос, как сейчас правильно писать то или иное слово, нужно обращаться не к русской классической литературе, а к современному орфографическому словарю.

Насколько можно судить, смысл вопроса в том, относится ли сочетание одну из льгот к налоговым льготам, упомянутым в заключительной части предложения. Нет, из предложения не следует, что налогоплательщики вправе использовать только одну из льгот, установленных федеральным законом. Сочетание налоговые льготы предполагает, что налогоплательщики вправе использовать неопределенное число данных льгот.

В словарях, содержащих диалектный материал, есть очень близкий по форме глагол — кабези́ться (Словарь русского языка. Составлен Вторым отделением Императорской Академии Наук. Т. 4, вып. 1. СПб., 1906–1907. Стб. 22; Словарь русских народных говоров. Вып. 12. Л., 1977. С. 285). Значение этого глагола формулируется как ‘выставлять незаслуженно свое я’, ‘вести себя высокомерно’. Таким образом, прабабушка просит внучку в общении со свекровью умерить свое самолюбие.

Полагаем, в этом случае точка после кавычки всё так же (как и в случае, когда цитата состоит из одного законченного предложения) не нужна.

Этот вопрос возникает вновь и вновь, мы на него уже отвечали: см. № 323730.

В полном академическом справочнике «Правила русской орфографии и пунктуации» под ред. В. В. Лопатина по поводу оборотов с предлогом кроме сказано следующее: «Оборот с предлогом кроме имеет два значения: а) одно совпадает со значением слов за исключением, т. е. имеет значение исключения из ряда подобных предметов: На всех берегах залива на протяжении сотен верст мною не было встречено ни одного человека, и, кроме горчайшей полыни и сухого бурьяна, я не сорвал ни одной травинки (Пауст.); Вершинин отправил луговиков в институт, всех, кроме Свиридовой, — ее он включил в высокогорный отряд (Зал.); б) другое — это обозначение включения в ряд подобных предметов: У Бунина, кроме блестящих, совершенно классических рассказов, есть необычайные по чистоте рисунки (Пауст.); Я слышал, кроме гудения мотора, еще несколько звуков (Пауст.).

В настоящее время различия в значениях оборотов со словом кроме не сказываются на пунктуации: и в том и в другом случае предусмотрено выделение запятыми. Однако в прошлом обороты со значением включения знаками препинания не выделялись. Ср.: Кроме учителей на собрание пришли и ученики. — Кроме учителей, на собрание никто не пришел».

В соответствии с рекомендацией справочника в Вашем случае обособление нужно. 

Вероятно, это будет анахронизмом (хронологической неточностью).

Запятую ставить не нужно. Эти слова обычно выполняют функцию союза и не обособляются, хотя иногда их выделяют как вводные при соответствующей интонации.