Да, наречие вовсе допускает двоякое толкование: 'совсем' (чаще – в разговорном стиле речи) и 'отнюдь'. Следовательно, возможно в зависимости от толкования как слитное, так и раздельное написание. Решение принимает автор текста: только он знает, какой смысл придается слову вовсе в каждом конкретном случае.