赤尾木城は、種子島を治めていた種子島家の居城で、別名上之城とも言われていました。寛永3年(1624年)第17代島主忠時が、現在の榕城中学校の地にあったのを、この地に移しています。明治2年(1869年)の版籍奉還まで約250年種子島家の城だったのです。
ここは、榕城小学校の正門で、写真で分かるとおり、石が積まれており、当時を物語っています。現在校庭には、アコウ、ヤマモモ、タブノキなどの大木が生息していて、その中でアコウは居城時代のものです。樹高12メートル、幹まわり約5メートル、樹齢400年以上の堂々たる風格です。
当時、城の中にアコウの木があったため、人々は「赤尾木城」と呼び親しんでいたといわれています。また西之表にはあちこちにアコウの木が生息していたため、「赤尾木」と呼んでいました。
校庭にあるアコウは、西之表市の指定保護植物になっています。