Заторчать на уме

(или приторчать на уме)

быть слишком серьезным, не понимать юмора, вносить психологическую тяжесть, дискомфорт в общение, работу.