Верно: улица Осьмова.
Мужская фамилия Осьмина изменяется так же, как существительное первого склонения: Осьмины, Осьмине, Осьмину, Осьминой, об Осьмине. В предложении Вы просклоняли фамилию верно.
Извините за задержку с ответом: мы обсуждали Ваш вопрос с нашими смоленскими коллегами, специалистами по топонимике. Словарной фиксации нет. Пойму реки Осьмы (смоляне произносят название этой реки с ударением на первом слоге) корректно называть Осьминской, пойму реки Вязьмы – Вяземской.