相传东河村向天湖盆地底部，五六百年前原是一处面积广达十余公顷的湖泊，湖中鱼类繁生。昔人因见该湖仰向天空，遂取名"向天湖"，也有称为"仰天湖"。

    矮灵祭来源，依山胞神话传说，古时赛夏族和身高不足三尺的矮人族，隔大东河而居。矮人身材虽短小，但臂力惊人，且长于巫术，尤擅长农耕技术。赛夏族人每年稻粟成熟时，必请矮人前来点检谷物结实状态，并共行祭祀，以卜丰收。

    然矮人性好女色，常到赛夏族部落中调戏妇女，或用巫术迷诱。族人受其凌辱，痛苦不堪，因无力亦不敢正面报复，遂设计消灭矮人。在一次丰年祭时，赛夏族人暗中设计将两族交界悬崖上矮人常去休憩的大树基部砍去大半，然后涂上泥巴伪装。矮人于歌舞后，一一攀上大树休息，隐藏在草丛中的赛夏族勇士，在一名朱姓长老率领下，一拥而上合力推倒大树，矮人悉数掉入深渊而亡。矮人幸免于难者，只有祖母"老柯可"、勇士"玛陆玛路"和"达吉欧"三人。他们虽然知道中了赛夏人的诡计，但咎由自取，在无可奈何之余，逃往不可知的东方。

    赛夏人虽解除了桎梏，然稻粟也不再年年丰收，族人为慰藉矮灵，乃举行矮灵祭。初时每年一次，后改为两年一次，与丰年祭合并举行。因当时由朱姓长老主谋害死矮人，每年祭奠均由朱姓族人主祭，时间在稻熟之后的10月中旬。

    传说矮人逃向东方，故矮人祭是向东迎祭，前后6天。祭祀分迎灵，娱灵，送灵三部曲，其中娱灵包括延灵、娱灵、谢灵三小段，各占一晚。目前一般所指3天3夜为娱灵部分的三小段，除这一段可供外人参观外，迎灵，送灵不容许别族人参加。

    赛夏族的图腾，取材自大自然的太阳与风，每个图腾都代表不同的意义，如"八"形的重叠图形代表山谷，斜四方形内有标记代表雪。因赛夏族为游牧民族，利用竹来表现编织，用木来雕刻图样。赛夏族精神象征是百步蛇，每两年一次的矮灵祭时，朱姓长老持用鹿皮、树皮及藤条编成的神鞭，就是表现百步蛇，赛语称“民答地你安”，神蛇的赛语称"哇武督"。

    赛夏族人对衣服的装饰，男女皆有浓厚的兴趣与创造力，因此在头、耳、颈、胸、腰、臀、腿等部位，都能利用藤编、麻织、贝壳、琉璃珠、琥珀、人牙、猪牙等天然材质，琢磨编制而成。衣服以自织麻布为主要衣料，用色线挑绣为衣服的纹饰，并从汉商购得的棉布为辅助衣料。大都以红、白、黑三种颜色编织而成。种类有胴衣、背心、胸衣、腰带、披肩、腰裙、头巾、膝裤等，依祭典、性别、年龄而有不同的穿法。 居住的家屋以二三家成一小聚落，为散居村落，建于山腹地或小台地上，筑屋材料以竹、木、藤为主。地基为横式长方形，房屋建于平地，以圆木搭架，以竹筑垣盖顶，屋顶普遍为两坡式或单坡斜面式，以长竹管劈成瓦加于椽上，墙则以竹片或茅杆沿边柱排列，以竹片夹之。

    赛夏族以旱稻为主要食粮，其次为粟、芋、山芋、玉蜀黍、菜豆、赤豆、木豆等。平时采素食主义，以盐、番署、蜂蜜为主要调味品。菜类于祭日或饮宴时才能享用。猎肉以山猪、鹿、羌、山羊、竹鸡等为主，有猎获时共食。家畜有猪、鸡，在祭日或饮宴时食用。鱼类亦仅在有渔获时众人分享。祭日之特殊食物为糯米饭、糕、粟酒、米酒。 赛夏族为父系社会，父死由子继承，母系家庭由长女继承，妇女死后回娘家，这是特殊仪式。同姓禁通婚，异姓不得通婚者为潘姓、根姓、钱姓。

    赛夏族无酋长，只有长老，且是合议制的社会，组合度高，各个姓掌不同任务，如矮灵祭时，朱姓掌理矮灵祭，潘姓掌理祈天祭，祈天祭由章姓请灵，各司其职，遇有纷争时由长老负责各部落之间协调。自古以来并无赛夏族文字，以口传延续至今。

    赛夏族人对酒，视为高物，为人与人之间建立交情与排解纷争，或谈要事之最佳食品，共饮之后增进情感，有纷争很容易排解，但并不酗酒。