潘祥初当年与著名爱国诗人[[丘逢甲]]交谊甚笃。丘逢甲曾作诗赠潘祥初，诗云：“大隐在城市，天南见此人。我来沧海上，相遇粤江滨。笑谈情文古，交游意气真。为君吟赠句，一掉五洲春。”潘祥初晚年曾在家乡居住，1911年在香港病逝，终年61岁。