По преданию, основан в 1001 году князем Владимиром как мужской Успенский. Занимал выгодное для обороны положение, будучи расположен на мысе, который на севере и западе круто обрывается к реке Луг.

О монастыре под названием «Святая гора» впервые упоминает летопись Нестора конца XI века. Также говорится, что первый игумен Киево-Печерского монастыря Варлаам умер здесь по пути из Царьграда (Константинополя) в Киев. Предполагается, что в эпоху Киевской Руси Зимненская обитель служила загородной резиденцией епископов Владимир-Волынских.