上阁村古名“姚家寨”，村内人多为姚姓，传说此为舜王后裔世代繁衍的居住地。因舜王的出身地叫姚墟，故因地得姓曰姚氏，而属于舜王后裔的“姚家寨”也缘此得名。上阁村座北朝南，雄据土桓之上，北枕神仙岭，南登药王殿，东西两河环流，四周青山环抱。古为西去平阳、西安，南到济源、洛阳的通衢古道。
明清时期，上阁村姚氏家族多在陕西、河南一带经商做买卖，因此历史上曾出现过多家富户，因而至今仍留有大量蔚为可观的古民居建筑，如村中的“合兴号大院”、“前南院”、“高楼院”、“照壁院”、“书房院”等，都属于姚家祖先经商发家后，于明清时期建造的豪宅大院。
这些大院建筑独特，风格迥异，其布局多为“田”字形、“棋盘式”的一进或二进四合院。大门既有中原风格的拱券形，门头施以砖雕拼成的门碣。也有北方砖砌木构式，门两侧及上部施以柱础斗拱。而且房檐下大都置有木雕枋和垂莲柱。其门窗建筑硕大多为四扇结构，此在其它民居中十分少见。
上阁村除了众多的古宅院外，其寺庙古建也十分丰富。据传当年村中曾有四庙九阁，由于历经数百年的风雨剥蚀，现仅存舜帝庙的主殿和龙岩寺两座古庙及三处古阁，但已是荒草没径，萧条破败。
其中的龙岩寺为县级重点文物保护单位，具有极高的历史文物价值。该寺建于上阁村边的台地上，为宋、金时代建筑，一进院落，有山门、正殿、东西耳殿、东西配殿，呈长方形布局，总体保存较好。