據 文 獻 記 載， 早 在 四 百 多 年 前 的 明 朝 年 間， 已 有 人 在 赤 柱 聚 居 並 建 有 村 落。 「赤 柱」 一 名 的 由 來， 流 傳 坊 間 的 說 法 很 多； 當 中 最 為 人 熟 悉 的 是 指 從 前 的 一 棵 巨 大 木 棉 樹， 每 當 木 棉 花 盛 開 時， 乍 看 猶 如 一 座 「赤 紅 的 木 柱」， 於 是 附 近 村 民 以 「赤 柱」 為 該 村 命 名。 至 於 赤 柱 的 英 文 名 稱 Stanley 的 因 來， 相 信 是 為 紀 念 十 九 世 紀 英 國 大 臣 史 丹 利 勳 爵 (Lord Stanley) 而 來 的。

據說赤柱以前有很多木棉樹，有鮮紅色的花朵，在日出的陽光照耀下，看起來像赤紅色的柱子，因此稱為「赤柱」。其英文名Stanley 則來自前英國首相史丹利勳爵（Lord Stanley）。