"Saimdang, Memoir of Colors" dizisi iki farklı dönemde geçmektedir: 1. Günümüz: Hikaye, bir Kore sanat tarihi profesörü olan Seo Ji-Yoon'un, Shin Saimdang'ın günlüğünü keşfetmesiyle başlar. 2. Joseon Dönemi: Dizinin büyük bir kısmı, 500 yıl önce, Shin Saimdang'ın gençliğinden başlayarak yaşadığı olayları anlatan geçmişe dönük sahnelerden oluşur.