Что такое долбить, всем ясно - тупо стучать, бить. Кстати, долото - родственное слово (пишет Фасмер).
А вот долбать - уже созвучно известному матерному глаголу.
А уж долб**б - это долбак в квадрате. Тавтология.

У Даля упоминается долбень - дурень, тупой, глупый человек.
А также долбила - дятел по-сибирски.
Так и дятел давно стал ругательством...