对于巴瑶族人为什么不能上岸,可能与他们起源的一个传说有关:在很久以前,在一次洪灾中马来西亚柔佛州的公主被大水冲走。他的父亲在沉浸悲痛中无法自拔,于是便命领下属出海寻找,而且下令他们找到公主后才能返回。这些人最后因为找不到公主,就在海边定居下来。他们身负找不到公主不能返回的命令,从此不踏上岸生活。巴瑶族的活动区域在国家之间的边境地带,他们不属于哪个国家,也就没有属于那个国籍一说。一直在海上漂泊的巴瑶族人在过去的几十年里,经常和那些有着确定边界国家的人们产生冲突。近年来,巴瑶族人生活的周边国家为了避免争端还有对自己国家海域资源的保护,政府强制要求巴瑶族人上岸定居。
巴瑶族虽是个古老的部落,他们祖辈都生活在海上与世隔绝,在他们生活的地方看不到现代文明的生活痕迹,更不要说医疗。现代文明社会,人们生小孩都是去医院,巴瑶族中没有医疗设施,就没有上医院生小孩的说法,待产的巴瑶族孕妇只能像原始生产那样生小孩。巴瑶族人与世界上所有人类一样喝淡水,他们虽然生活在海上,但所活动的区域周围有很多的岛屿,他们生活所需的淡水都是到周围的岛屿上获取。由于周边国家政府的强制措施,巴瑶族人的生活方式被迫改变,也许在不久的将来会没有了生活在海上的巴瑶族人。