早年在现今六龟大桥底下的河床边，有六座巨大的岩石，突立在河岸壁，每逢雨季、溪水常常在大雨后暴涨、滚滚浊流淹没两岸树木岩石，但是不论山洪涨的多高，这六座岩石都像浮在水面，任由一波波浊浪冲击，稳稳屹立水中，远远望去，很像是在水中载浮载沉的六隻乌龟，六龟地名即由此而来，乡民看作是六龟的守护神。
被称为六龟的六座岩石，现在仅存三座，建大桥时挖掉一座，另外二座可能被大水冲走了，但也有可能被埋在砂砾中。六龟这个相当纯朴的地方有一个很特别的就是很多东西都跟六脱离不了关系，从六龟的六个旧的隧道，以前只做五个就是会崩塌，在建置六个以后就不再崩塌了，还有三尖山、三尖石加起来也是六，尤其以十八罗汉山之特殊地形也是六的倍数，连这里的夜市也是星期六够玄了吧！还有在这里巧遇的石壶创作大师张运正，他的作品也绝不会超过六件，怎么样六龟的传说是不是很有趣呢？好奇的话不妨亲自走一趟，或许你还会发现更新的喔！
