Оба выражения корректны, однако имеют разное значение. Сходить с ума по кому-чему — очень увлекаться кем-чем-н., быть в восторге, восхищении от кого-чего-н. Сходить с ума от кого-чего — сильно беспокоиться, тревожиться, волноваться, нервничать из-за кого-чего-н.

Верно: в восхищении, в восхищенье.

Правила таковы:

Слова среднего рода на -ие имеют в предложном падеже, в отступление от общего правила, окончание -и, а не -е: в сопровождении, в молчании, в подразделении. Слова среднего рода на -ье имеют в предложном падеже окончание -е: в ущелье, о варенье.

У большого количества слов есть вариантные формы на -ие и на -ье, например: проклятие - проклятье, спасение - спасенье, возвращение - возвращенье, признание - признанье, молчание - молчанье и т. п. При этом формы на -ие часто являются общеупотребительными и стилистически нейтральными, а формы на -ье характерны для разговорной и поэтической речи (хотя может быть наоборот, ср. счастье - общеупотребительный вариант, счастие - устаревший, встречающийся в поэтических текстах). При наличии таких вариантов на -ие и -ье указанные падежные формы имеют разные окончания -и и -е, например: об умении - об уменье, в молчании - в молчанье.

Однако в художественной, особенно поэтической, речи допускается написание форм предложного падежа существительных среднего рода на -ье (обычно при предлоге в) с окончанием -и, например: В молчаньи шел один ты с мыслию великой (Пушкин). Ошибкой здесь это не является.

См.: Правила русской орфографии и пунктуации. Полный академический справочник / Под ред. В. В. Лопатина. М., 2006 (и более поздние издания).

В существительных среднего рода на -ье в предложном падеже единственного числа пишется буква Е: в восхищенье, о счастье. См.  «Справочник по правописанию и литературной правке» Д. Э. Розенталя (§ 37).

Неясно, о каком глаголе идет речь: высказать или выказать.

Грамматически оба варианта верны.

Да, правильно написание с удвоенной с.