缙云县始建于武周万岁登丰元年（696年），以境内古缙云山而得名。

而缙云山名称由来，据王尔鉴的《缙岭云霞》诗，其序云：“缙云山九峰争秀，色赤如霞。缙，赤色也”。缙云山间云雾缭绕，气象万千，云霞时常变得色赤如火，姹紫嫣红，五彩缤纷。古人以赤多白少为缙，故名缙云，遂为山名。