не убудет

кого, от чего. Хуже не станет кому-либо. Меня и не убудет от того, что заметят мою неразговорчивость, ежелия действительно молчалив (Добролюбов. Луч света в тёмном царстве).

Источник: Фразеологический словарь русского литературного языка на Gufo.me