幼時,其父好友一
陰癸派長老來做客無意透露魔門秘密,為殺人滅口,傳授武功給其父,其實是邪功會致人走火入魔。
香玉山的父親自問不是練上乘武學的料,於是便將此法門傳給了香玉山,著他練習。最後導致香玉山走火入魔,落下內傷,不能練就上乘武功。香玉山以其家開的妓院作為收集天下情報的秘密基地,為
蕭銑掌管信息。
後遇
寇仲和
徐子陵,寇徐兩人為其治癒了內傷。為了控制雙龍,不惜騙取
素素感情,使素素嫁給他。
待
成親後,又始亂終棄,致素素含恨而死。素素死後,寇徐兩人認定香玉山是害死素素的罪魁禍首,廢其武功,卻沒有殺死他,兩人立誓要剷除香家勢力,關閉所有香家賭場和妓院。
香玉山知寇徐兩人不會放過自己,投入
東突厥頡利可汗的軍師「魔師」
趙德言門下作弟子,屢次幫趙德言出謀劃策欲除雙龍而後快,但都被雙龍一一化解。
在書的最後,被寇仲以離間計挑唆,死在其師趙德言手上,可說間接為素素報了仇。