师姓潘。母朱氏梦日光入口，因而有娠。及诞，异香满室，遂名香光焉。九岁出家，二十受戒于荆州果愿寺。一日，游至孤山永福寺，有辟支佛塔，时道俗共为法会，师振锡而入。有韬光法师问曰：“此之法会，何以作声？”师曰：“无声谁知是会？”后见秦望山有松萝繁茂，盘屈如盖，遂栖止其上，故时人谓鸟窠禅师。
元和中，白居易出守兹郡，入山礼谒。乃问曰：“禅师住处甚险。”师曰：“太守住处尤险。”曰：“弟子位镇江山，何险之有？”师曰：“薪火相煎，识性不停，得非险乎？”又问：“如何是佛法大意？”师曰：“诸恶莫作，众善奉行。”曰：“三岁孩子也解恁么道。”师曰：“三岁孩子道得，八十老翁行不得。”白遂作礼。师于长庆四年忽告众住：“吾今报尽。”言讫坐亡，寿八十有四。