只是有些人血红的双眼中看到的不是如此，而是“一片万钱”。沉香本就难得，海南沉水香更是稀罕物，逐渐便有“香价与白金等值”，如此贵重稀有难得，便顺理成章成为宫廷贡品，便会有当地官府大肆搜刮百姓，利用权力强买强卖，诛求无度、糟蹋浪费也就罢了，但害得不少百姓为此家破人亡，许多百姓本盼着贸香糊口，却未曾想此举是羊入虎口。
求者贪略无度，祖辈赖以生存的山林被采空了，香树也因此断根绝种。亲眼目睹这种竭泽而渔行为的苏轼自然是忍不了，当即挥笔写诗批评了这种荒诞的奢侈浪费和暴殄天物的行为——“本欲竭泽渔，奈此明年何”。康熙七年，时任崖州知县的张擢士也上书朝廷请免供香——“倘若此年复一年，将虑上缺御供，下累残黎，区区征末吏又不足惜矣”。
后来官方也确实对此颁布了一些禁令，在昌江县石碌区水头村头有一块立于乾隆四十四年的残碑——“奉宪严禁碑”，碑上记录了当年琼州知府萧应植所颁的采香禁令，从碑文可见早就对滥采滥伐的行为进行过三令五申，但还是有衙门官吏找人进入黎峒索扰，只好把碑立起，以免口说无凭。
只是这样的决定来得还是太晚了些，现在海南沉水香已成奢侈物，寻常人再难有燃香闻香之幸了。
