Я просто подумал об этом сам и нашел ваш пост без ответа, поэтому пришлось посмотреть немного дальше. Я предполагаю, что вы уже решили проблему, но, возможно, мой ответ поможет другим в будущем.
Я использую Emacs 24.5.1 и AUCTex 11.88.
Настройку сворачивания AUCTex можно найти в меню «Параметры» (меню) -> «Настройка Emacs» (меню) -> «Обзор групп настройки» (меню). Затем в появившемся буфере выполните следующие ветви из группы Emacs: «Текст» -> «Текст» -> «AUCTex» > Tex Fold и нажмите «Option», где он содержит список спецификаций макроса Tex Fold.
Там вы найдете список упаковщиков, которые свернуты в [c], в настоящее время, вероятно, содержат только «cite». Добавьте структуры цитат natbib, я также добавил структуры Гарварда.