Выражение идти в баню характеризуется современными нормативными словарями ка просторечное: Иди [ты] к чёрту (к дьяволу, на фиг, в баню, куда подальше и т. п.); шёл бы (пошёл бы) кто-л. к чёрту (к дьяволу, на фиг, в баню, куда подальше и т. п.) прост. – говорится при желании отвязаться, избавиться от кого-л. □ Шёл бы он в баню со своими советами!
Наречное выражение, о котором Вы спрашиваете, должно писаться раздельно. Оно соответствует правилу. См. также словарную фиксацию.