海棠园位于凌云山千峰祖师洞外、集凤楼前的斜坡上，因遍植一坡海棠树，蔚然成林，故名海棠园。据史志记载，乐山城郊古代有成片成片的海棠，城西有海棠山。海棠花开的季节，地方官总要邀集幕僚来此宴赏。

    古代乐山的海棠不光花色艳丽，而且香味扑鼻。《西阳杂俎》中说：“嘉州海棠，色香并旺。 ”《阅耕余录》也说：“嘉州海棠有香，独异他处。”孙长明的《海棠记》详细记载了古代嘉州海棠的几个不同品种和各自的特点：“棠有甘棠、沙棠、棠梨，皆非海棠也。又有黄海棠，色黄；贴干海棠，花小；垂丝海棠，花粉红色，皆无子，亦真海棠也。海棠盛于蜀中，二月开花，五出，初如胭脂点点燃，开则渐成缬晕，落则有若宿妆淡粉，其蒂长寸许，淡紫色，或三萼五萼成业。其蕊如金粟，中有紫须，花落结子，如梨，名海红。然蜀中亦为嘉州者有香而朵大。”

    大文豪郭沫若对家乡乐山的海棠也情有独钟。1973年他回到故乡乐山时所做的一首名为《重游草堂寺》的诗中说：“何处海棠香讯在，草堂寺内几徘徊。”郭沫若还热情地为乐山家乡题写了“海棠香国”四个大字。现在这四个气韵饱满的大字镌刻在凌云山海棠园的山石上，为海棠园平添了一道文化风景。