На слова “Ладно, не буду тебя отвлекать” можно ответить по-разному, в зависимости от контекста разговора и ваших ощущений. Вот несколько вариантов:

Дружелюбный:

“Ты меня совсем не отвлекаешь, всё нормально!”
“Да ладно, всё окей, продолжай.”
С благодарностью за понимание:

“Спасибо, что понимаешь, просто сейчас немного занят(а), но давай позже обязательно поговорим.”
“Да, давай чуть позже, но я рад(а), что написал(а).”
С намёком на продолжение:

“Ты точно не отвлекаешь, я наоборот рад(а), что ты написал(а).”
“Ну ты всегда можешь вернуться к этой мысли, я на связи!”
Шутливый:

“Ой, а я-то уже собрался(ась) отвлекаться.”
“Не отвлекал(а), а радовал(а), между прочим!”
Если хочется поддержать разговор — лучше дать понять собеседнику, что его присутствие вам приятно. Если, наоборот, нужно немного личного времени, можно аккуратно объяснить это, не обижая человека.