отбрести от кола

(иноск.) — удалиться (в беседе) от сути в сторону

Ср. Но сват меня заговорил, и я отбрел от кола; начал, надобно кончать.

Даль. Сказка о Шемякином.

Источник: Толково-фразеологический словарь Михельсона на Gufo.me