остаться ни при чём

Оставаться НИ ПРИ ЧЁМ. Остаться НИ ПРИ ЧЁМ. Разг. (Оставаться) без того, на что рассчитывал, надеялся кто-либо. [Пианист] поспешнее прежнего вскочил, чтобы её проводить — и, оставшись ни при чём, так взмахнул волосами, как, вероятно, сам Лист никогда не взмахивал! (Тургенев. Клара Милич).

Источник: Фразеологический словарь русского литературного языка на Gufo.me