Нет, это невозможно. Logrotate вращает весь файл.
Конечно, было бы возможно написать скрипт, который объединит файлы вместе и покажет вам также последние строки предыдущего журнала, базовый пример:
#!/bin/bash tail -5 /var/log/apache2/access.log.1 cat /var/log/apache2/access.log