Верно: Как только меня не терзали!

Запятая нужна, если в речи между союзами но и как только делается пауза. Если паузы нет, запятая не ставится.

Такой оборот вполне корректен: Вы, Николай Аполлонович, с своею инвалидною бородой были бы здесь невозможны: вам, как только бы вы вышли на улицу, непременно подадут милостыню [И. А. Гончаров. Фрегат «Паллада» (1855)]; Простого, понятного, русского языка Бальмонт боится, и совершенно резонно, ибо, как только бы он заговорил просто, сейчас же обнаружилось бы его убожество [К. Д. Бальмонт. Полное собрание стихов (16.04.1913) // «Московские ведомости», 1913] и т. п. Однако нужно заметить, что в нем имеется некоторая инверсия: частица бы более уместна после глагола, к которому относится (как только вы вышли бы, как только он заговорил бы). 

Как только — союз со значением времени, указывающий на быструю смену событий. В предложении, таким образом, происходит «стык» двух союзов — но и как только. Запятая между ними может ставиться или не ставиться в зависимости от того, присоединяет ли первый союз (в нашем случае — союз но) всё сложноподчиненное предложение целиком или только его главную часть, находящуюся после придаточной. Формальным показателем этого служит наличие или отсутствие второй части (коррелята) подчинительного союза, сравним примеры, приводимые в параграфе 123 полного академического справочника «Правила русской орфографии и пунктуации» под ред. В. В. Лопатина: Собака приостановилась, и, пока она стояла, человек видел, как солнечный луч обласкал всю полянку (Пришв.); Думал я, что если не случится в этот час перемены, то  судье уток не стрелять этим утром (Пришв.). Если в первом примере придаточную часть можно изъять или переместить (сравним: Собака приостановилась, и человек видел, как солнечный луч обласкал всю полянку, пока она стояла), то во втором сделать это мешает коррелят то. В нашем случае у союза как только нет второй части, а значит, запятая перед ним нужна: Вокруг не было ни души, когда я приходил на реку порыбачить, но, как только я закидывал удочки, из балки появлялись босоногие мальчишки.

Добавим, что, как указано в этом же параграфе, запятая на стыке сочинительного и подчинительного союзов может не ставиться даже в том случае, если подчинительный союз не имеет второй части, но сочинительный союз при этом должен иметь присоединительное значение. В нашем случае значение союза но противительное.

В самостоятельном (не придаточном) предложении: Как только не называют...

Следует либо поставить точку с запятой, либо разделить предложение на два: Она просачивалась через трещины; как только мальчик шевелился, она исчезала или Она просачивалась через трещины. Как только мальчик шевелился, она исчезала.

Если это восклицательное предложение, то верно с не: Как только социализм не честили! Если это часть предложения, то верно с ни: Как только социализм ни честили, все равно люди продолжают вступать в социалистические партии.

Нужна запятая: Сообщим Вам, как только получим ответ.

Широко известно, что, как только происходит что-нибудь не совсем обыкновенное, сразу же появляются слухи.

Первую часть целесообразно оформить отдельным предложением: Уже занимаемся вопросом. Как только появится информация, сразу вам напишем. Возможен вариант с тире вместо запятой: Как только появится информация — сразу вам напишем.