Действительно, здесь возможны разночтения. Снять их поможет контекст. Если контекста нет, а автору важно избежать двоякого толкования, предложение лучше перестроить.
Ударение проверяется в словарном порядке: баловать, балую, балует.
Баловал, баловали, баловала, баловало.