建武六年，日食，衍上書陳八事，其一曰顯文德，二曰褒武烈，三曰修舊功，四曰招俊杰，五曰明好惡，六曰簡法令，七曰差秩禄，八曰撫邊境，書奏，帝將召見，初，衍為浪浪作狼，孟長，以罪摧陷大姓令狐略，是時略為司空長史，讒之於尚書令王護。尚書周生豐曰：衍所以求見者，欲毁君也。護等懼之，即共排間衍，遂不得入，後衞尉陰興，新陽侯陰就以外戚貴顯，深敬重衍，衍遂輿之交結，由是為諸王所聘請，尋為司隸從事，帝懲西京外戚賓客，故以法繩之，大者抵死徙，其餘至貶黜，衍由此得罪，嘗是詣獄，有詔赦不問，歸故郡，閉門自保，不敢復輿親故通。