Это не наречие, а слово категории состояния. Написание зависит от значения. Если перед не страшно можно подставить слова вовсе, отнюдь, то следует писать раздельно. Если можно подставить очень, достаточно, то следует писать слитно.
В роли сказуемого пишется раздельно: не страшно.
Это сказуемое. Верно: В этих украшениях не страшно вступать в осень, потому что они...
Запятая не ставится:
1) между двумя повторяющимися словами, из которых второе употреблено с отрицанием не, если сочетание этих слов образует единое смысловое целое, выражающее неполное отрицание или неопределенность в обозначении чего-либо: Страшно не страшно, а на душе как-то строго (Леск.); Дождь не дождь, а паши (Ш.); На нём надето что-то круглое: сюртук не сюртук, пальто не пальто, фрак не фрак, а что-то среднее (С.-Щ.); Рад не рад, корми его (П.); Попал в стаю, лай не лай, а хвостом виляй (Ч.); Маленький не маленький, а это знать не мешает; Была не была — пойду;
2) при повторении слова с частицей так для усиления смысла: Пропаду так пропаду, всё равно! (Дост.); Свадьба так свадьба; я Огудалова, я нищенства не допущу (Остр.); Вот это была косьба так косьба! (См.); Да так да, нет так нет; Не надо так не надо.
Возможны оба варианта. Раздельное написание подчеркивает отрицание.