просто если бы ставил из rpm пакетов то удалить было бы гораздо легче
обычно стоит указывать --prefix -опцию configure
а сейчас imho надо смотреть Makefile и смотреть что куда он распихал .
у меня так:
/etc/asterisk
/etc/rc.d/init.d/asterisk
/etc/rc.d/rc*.d/*asterisk
/usr/include/asterisk
/usr/lib/asterisk
/var/log/asterisk
/var/spool/asterisk
/usr/sbin/asterisk
/usr/sbin/safe_asterisk
ну и там где схоники лежали
если были zaptel, libpri, то и их тоже - но тут посложнее