据史书记载，古劳茶山产茶于“宋元时期已现端倪”，而茶山顶的良道坪、大坑坪、永安、七星坑、锣鼓地、塔磨塘等六条村庒在550年前已开始植茶。茶山具有独特的自然条件，这是因为西江水从北向南直冲茶山，被石岩头顶着，使西江水转向东流，造成茶山露水丰富，适宜植茶。

丽水石岩头一带的山地就特别湿润，故种出的茶甘爽、醇和，有翠岩、龙芽、雪菊、银针等著名品种。翠岩采自石地者为最佳，乾降牌县志载有“翠岩味匹武夷而带芳”，银针形似寿眉，尖如针，叶背显露白如银，叶底青翠，茶汤浓滑芳香。新会人黄炳坤的《忆岭南》诗中有银针“香味远出寿眉数倍”“久经脍炙人口”之句。

雍正10年（1732），鹤山建县，鹤山茶园不断发展，道光初年达到鼎盛期。据道光版《鹤山县志》称，古劳茶山、大雁山等地“一望皆茶树”，出现茶烟万顷的景象。当年，茶山和山脚的丽水有茶园1000多亩。古劳茶曾通过广州沙面洋行销往欧美、澳大利亚，香飘万里，名扬五洲。那时，华侨、港澳同胞回乡探亲，临走时总是喜欢带点银针回去，送给亲友，共享家乡特产风味。抗日战争爆发，鹤山茶业开始衰落，许多茶园荒芜，1937年古劳茶山、丽水的茶园仅存448亩，产量301担。

建国后，随着人民生活水平提高，茶叶供不应求，古劳茶开始复苏，那时各地出现一些以龙眼叶、鬼灯笼等制成的假茶，严重影响鹤山茶的声誉，造成大量茶叶积压滞销，打击了茶农的积极性，茶山村不少茶农不得已改种经济效益好的素馨花，也因为这缘故，至今仅余百亩左右茶园，往日“一望皆茶树”景象不复存在。