Около 1220 года, оставив Хутынскую обитель, они удалились на пустынный полуостров, расположенный в 3-х верстах от города Старая Русса, между реками Полистью и Смежною, и со временем основали там монастырь во имя святителя Николая, настоятелем которого преподобный Константин был до самой кончины († ок. 1240).
Преподобный Косма продолжал подвиг своего наставника. Он погребен в одной гробнице с преподобным Константином. Тела их покоились под папертью Николаевской церкви, построенной в 1820 году на месте погребения святых.
