Запятая не нужна.
Верны оба варианта.
К сожалению, правила недостаточно четко регламентируют данную ситуацию. При прямой речи, стоящей после слов автора и заканчивающейся вопросительным знаком, восклицательным или многоточием, точка не ставится (см. оформление примеров в § 196 Правил 1956 года). Однако Ваш пример ближе к предложениям, в которых при разных знаках внутри кавычек и в конце всего предложения, знак конца предложения все же ставится. Приведем правило из Полного академического справочника под ред. В. В. Лопатина (§ 159): «если перед закрывающей кавычкой стоит знак вопросительный, восклицательный или многоточие (и на этом предложение заканчивается), то те же знаки, необходимые по условиям всего предложения, не повторяются после закрывающей кавычки; неодинаковые знаки (перед кавычкой и после кавычки) ставятся». Ср. примеры:
Вы читали роман «Кто виноват?»
Неужели вы не прочитали роман «Что делать?»!
Оба варианта неудачны. Предлагаем такую формулировку: Мемориальная доска на здании музея свидетельствует о том, что он является объектом культурного наследия.
Запятая перед причастным оборотом нужна: розовая блуза, декорированная жемчугом.
Кавычки поставлены правильно. Рекомендуется после слова табличка поставить двоеточие (см. примечание к параграфу 50 справочника по пунктуации Д. Э. Розенталя): Сбоку висела табличка: «Главный геолог Михаил Алексеевич Иванов».
