Это будет некорректно. Возможные варианты: разбить на пары и по парам.
В этих названиях слова музей, галерея выступают как нарицательные существительные, обозначающие родовые понятия. Не видим практического смысла в рассуждениях о том, как бы писалось название Метрополитен-музей при ином порядке слов, потому что такое написание (сначала музей, потом Метрополитен) не принято, название учреждения: Метрополитен-музей.
Как историческое событие (в Москве, 1945) правильно: Парад Победы. В остальных случаях: парад Победы.
Общие правила Вы найдете здесь: Трудные формы множественного числа имен существительных.
Большой толковый словарь
В значении "в первое время": на первых порах.