建武十七年（41年），朝廷一次征召他，严光仍不就。严光八十岁时，在家中去世。刘秀倍感哀伤，诏郡县赐钱百万、谷千斛安葬，墓在陈山（[[客星山]]）。