Интересный случай. Кавычки — знак дословной передачи чужой речи. При пересказе они использоваться не должны. Можно было бы оформить предложение как бессоюзное:

Как он там говорил? Двадцать три года живу здесь, никого, кроме зайцев и белок, не трогаю — так вроде бы...

Ср. с примером из справочника по пунктуации: Идти вперёд или погибнуть — так стоял вопрос перед партизанским отрядом.

Но Ваше предложение по форме является предложением с прямой речью. Говорящий думает, что он передает чужую речь более или менее точно. Полагаем, что границы этой восстанавливаемой по памяти прямой речи желательно показать, чтобы предложение легко и правильно воспринималось: 

Как он там говорил? «Двадцать три года живу здесь, никого, кроме зайцев и белок, не трогаю» — так вроде бы...

После закрывающих кавычек ставится только тире (независимо от того, каким знаком препинания заканчивается прямая речь) в тех случаях, когда в последующих авторских словах содержится характеристика прямой речи, ее оценка и т. д. (авторская ремарка начинается словами так говорит, так указывает, вот что сказал, вот как описывает и т. п.): «Ничего не случилось» — так говорил ум; «Случилось» — так говорило сердце; «Нет ничего прекраснее этих снежных вершин» — так описывает эту местность один путешественник; «Будь внимателен и осторожен!» — вот что он сказал мне на прощание.

Ответить на Ваш вопрос мы попросили д. ф. н. М. Я. Дымарского.

Это безличное предложение. Его грамматический центр — будет к кому обратиться. Ни под один из стандартных типов сказуемых он не подводится, это главный член безличного предложения, выраженный сочетанием бытийного глагола в спрягаемой форме (это не связка, его можно заменить другим бытийным глаголом: нам найдется к кому обратиться), вопросительно-относительного местоимения в косвенном падеже (но это может быть и несклоняемое местоименное наречие: нам есть куда обратиться) и инфинитива.

Более широко распространены отрицательные варианты таких предложений — с отрицательными местоимениями: Нам было не к кому обратиться, Нам не к кому обратиться, Мне некуда было пойти и т.п. Лермонтовское ...И некому руку подать в минуту душевной невзгоды — реализация именно этой модели. Особенность этой модели в том, что в ее отрицательных модификациях бытийный глагол в формах настоящего времени «прячется» в отрицательном местоимении, хотя в прошедшем времени он прямо выражен: Мне было некуда пойти. Такое поведение характерно для формальной связки, но в данном случае ее нет: формальная связка (то есть глагол быть в спрягаемой форме, но лишенный бытийного значения) не может заменяться полнозначными глаголами типа найтись, оказаться и т. п.

Об этом написано в электронных словарях на нашем портале, воспользуйтесь окном «Искать на Грамоте».