Корректно: в лицее "Бауманский", в Бауманском лицее.

Справочные пособия рекомендуют согласовывать с родовыми наименованиями названия озер и островов, выраженные полными именами прилагательными. См. «Справочник по правописанию и литературной правке» Д. Э. Розенталя (раздел «Согласование определений и приложений», параграф «Приложения – географические названия») и «Словарь географических названий» А. В. Суперанской (М., 2012).

В практике письма наблюдаются колебания. Так, Д. Э. Розенталь приводит два примера из одной статьи К. Симонова: Длина острова Даманского – полтора километра и Провокации происходили и около острова Даманский, и в тридцати километрах оттуда.

Это разные случаи. В первом случае перечислению однородных членов (определений) не предшествует обобщающее слово (определение с обобщающим значением). Второй случай связан с наличием перед перчислением обобщающего слова или специальных слов (как то, например, а именно). Кстати, 174-й параграф корректнее сопоставлять со 160-м.