Существительное мужского рода мыш не отмечается словарями литературного языка, но оно встречается в диалектах, разговорной речи, художественных произведениях. Подобные примеры можно найти с помощью «Национального корпуса русского языка» или сервиса books.google.ru, см. также «Словарь русских народных говоров». Если автор использует слово мыш целенаправленно (например, как стилистическое средство), то исправлять его не нужно.
При согласовании с прилагательным в мужском роде, конечно же, писать мягкий знак не нужно. Но следует учитывать, что такое согласование не отвечает нормам литературного языка.
Для обозначения этого животного в литературном языке используется только слово женского рода мышь. Вариант для обозначения самца мыш встречается в диалектах, используется в художественных текстах, но находится за рамками литературной нормы.