越王李贞为唐太宗李世民第八子，虽不是皇后所生的嫡子，但才华出众，而被先后封为汉王、越王。越王楼在李贞任绵州刺史时由李贞亲自督建，参考了长安、洛阳诸多王府的营造规划，再根据龟山的地形地貌，依山取势，因势建楼。越王楼的修建先后历时3年，耗银50万两，楼高10丈。越王楼经历唐、宋、元、明，明万历年间重修，后毁于清乾隆初年。遗址越王台，保留迄今，已有二百余年。 2001年10月24日，越王楼开始重建，后由于多种因素的影响，越王楼重建工程于2005年3月28日停工。 越王楼是与黄鹤楼、鹳雀楼、岳阳楼其名的中国四大古名楼之一。与滕王阁、蓬莱阁、解池阁、真武阁等四大名阁一起构成我国古代著名楼阁建筑。