Употребление слова азбука в значении "книга для начального обучения грамоте" возможно в том числе в контексте, связанном с языками, алфавиты которых не основаны на кириллице. Ср. также: нотная азбука, азбука Морзе.
Большой толковый словарь
Безусловно.