赛阳岩又称息景岩、息影岩、新岩，俗称小朝阳岩。在零陵城东三里，东向临水，幽峭隐秀，故与朝阳岩齐名。
清咸丰八年至同治三年，杨翰任永州知府，更名为“息影岩”，作《息影岩铭》：“潇东有岩，惟石逋峭。古洞寂寥，游屐罕到。云出岩腹，泉漱山根。”并建清晖阁、澹虑亭于其上。黄佳色在《息景岩记》中写道：“由袁家渴溯流而上即新岩，岩临潇水，与朝阳相仿佛。朝阳敞，新岩僻。朝阳光豁百里，新岩幽隐一潭。朝阳如李青莲醉赋《清平》，神采焕发；新岩如班婕妤独吟《长信》，意态绰约。”因历史原因，赛阳岩不幸被炸毁，仅存残痕。
赛阳岩不仅是风景名胜处，也是一块埋藏古文化的宝地。20世纪80年代，在这里出土了新石器时代的多种遗物，如石斧、石矛、石镞、石棒、穿孔石、夹砂陶以及饰有各种花纹的红、灰陶片，还有头骨化石等。这一切说明零陵的先民在距今5000年左右就在这里劳作，创造了劳动工具、生活用品和艺术品。