Aspell предоставляет несколько режимов работы.
--mode=<string>, -e, -H, -t, -n Sets the filter mode. Mode is one of none, url, email, html, tex or nroff. The alternative shortcut options are '-e' for email, '-H' for Html/Sgml, '-t' for Tex or '-n' for Nroff.
Похоже, вам просто нужно установить словари hunspell, а затем вы можете запустить aspell с опцией -H (--mode = Html / Sgml).