梅花也就渐渐的多了起来。隐士常年居住在山中，种梅花，卖梅子而生，余钱除去生活所需便都用来养育了梅花。后来不是读书人仰慕那隐士，便多来此处赏梅，偶尔也会亲手栽种上几株梅树。渐渐的，这里也变成了名副其实的梅山，梅花也栽种的越来越多。数百年来，梅树一直都有栽种，也有一些老了腐朽了，死去了，便又有新的梅树种上。
渐渐的，才成了今日的规模。而其中梅树也自然大小不一，有数百年前还活着的老梅，也有这两年才种上的新梅。梅花多了，自然色彩和品种也都多种多样起来了，这梅山也更加的色彩缤纷。根据花色，这里的梅花可分为白梅、绿梅、朱砂(红梅)、宫粉(粉红)、黄梅等几种。至于品种，也是种种不一，有常见的宫粉梅，也有名贵如鸳鸯梅之类的。
梅山的高处建了些舍，最高的地方是“观梅轩”，至于舍有“暗香阁”之类的，舍典雅，名字也精美的很。这些舍多是学子们出资所建，前朝就有了些，陈旧之后也一直有修缮，后来也慢慢的建上了些，规模倒是越来越庞大了。
而栊翠庵也有个同梅山相关的故事，据说建立栊翠庵的原是前朝那位隐士的未婚夫。两人都是豪门子弟，门当户对，自幼便定了亲事。后来发生了很多事，男子家中