Обклеить является разговорным вариантом.
Стыдно выполняет роль сказуемого. Строго говоря, это слово категории состояния, а не наречие.
Можно использовать предлог В, если требуется подчеркнуть, что светильники устанавливаются в углубления стен.
Верно: о стену. Вариант с предлогом об устаревший.