語出《史記·卷一二六·滑稽傳·褚少孫補衛青傳》：「東郭先生久待詔公車，貧困飢寒，衣蔽履不完。……及其拜為二千石，佩青緺……同官待詔者，等比祖道於都門外，榮華道路，立名當世，此所謂衣褐懷寶者也。」後比喻外表樸陋，卻內藏真才。