直不疑任职郎官（掌管宿卫侍从的官职）时，同寝室有人请假返乡，误拿走另一位室友的金子。金子的主人以为是直不疑拿的。

等到请假的室友回来，将金子归还原主，主人感到非常惭愧。

直不疑因此被尊称为「长者」，后来官拜御史大夫（职掌上奏、监察及弹劾的最高行政首长，兼副丞相，是三公之一，官位极为显赫），皇上封他为「塞侯」。（《史记》直不疑传）