在小说《
封神演义》文章原话中，骷髅山是
白骨洞的所在地，是截教门下“
石矶娘娘”的修行之地，亦为一气仙“
马元”的住处，为一处私人修道道场，地点位于
陈塘关的西南方向。顾名思义，此山地形结构如同骷髅骸骨一般，故取名骷髅山，虽非风水宝地，却独具一方阴暗色彩。
《封神演义》第13回：
太乙真人收石矶——今日
哪吒拿起来，射了一箭，只射到骷髅山白骨洞，有一石矶娘娘的门人，名曰
碧云童子，携花篮采药，来至山崖之下，被这一箭正中咽喉，翻身倒地而死。
骷髅山是《封神演义》全书之中名称较为另类的山，同时也是书中唯一最恐怖的山名，而且先后住着一男一女
石矶与马元两个修行者，与大部分仙人所居住的仙山格格不入，不同于其他截教门人居住地山清水秀，与阐教仙人广成子的九仙山、太乙真人的乾元山等之类也不同。作者既然将石矶的住处命名为骷髅山，原因大致是根据石矶的原型记载得来的灵感。石矶在《封神演义》之前的记载中就是一个为祸人间的女魔头，比如明初记载的《
三教搜神大全》就提到：“（那叱/哪吒）不意时上帝坛，手搭如来弓箭，射死石记娘娘之子，而石记兴兵。帅取父坛降魔杵西战而戮之。父以石记为诸魔之领袖，怒其杀之以惹诸魔之兵也。”——这段记载中的石矶娘娘（石记娘娘）是“诸魔领袖”，即天下所有妖魔的首领。动画片《哪吒传奇》中的“大魔头石矶”的设定就是这么来的，而不是动画原设。
小说《封神演义》设定石矶住在骷髅山白骨洞，很大关系是因为初期形象是邪魔的关系，明代初期的《三教搜神大全》是《封神演义》重要的素材来源之一。封神作者创作《封神演义》中的石矶时经过取材参考当初“石记为诸魔之领袖”的背景，《三教搜神大全》中记载的哪吒则是正义一方的战神，用降魔杵杀了妖首石矶（石记），明代末期小说《封神演义》中的石矶之所以被杀，就是当时的封神作者取材时依据原型被哪吒杀死来改编。这《哪吒传奇》与《三教搜神大全》中两处版本的石矶都是魔头的共同点，所以“骷髅山”这一名字早就定好了谁是正派谁是反派，因为把骷髅山和魔头联系在一起确实很是般配。而且《封神演义》中专以人心为食的魔头“马元”就住在骷髅山里，这个马元和石矶也有一脉相承的交集，除了都住在骷髅山，还都是阐教一方的敌人，只是出场章回不同。
至于骷髅山上的“白骨洞”这一洞府就有点凌乱，有不少人认为白骨洞最早来源于《西游记》中白骨精（白骨夫人）的住所，其实这是错误的。首先，吴承恩创作的《西游记》原著文章中，并没有描写过所谓的“白骨洞”，白骨洞这个词在《西游记》原文中不曾有任何文字提及。只有改编于《西游记》的动画片及真人影视中才有所提及，从而误导了一些人。骷髅山白骨洞最早是《封神演义》原创的地点，《封神演义》原文中的骷髅山上“白骨洞“这一地方是随着《西游记》影视剧的传播、而被民间大众印象中熟知的既定认知，即著名妖怪“白骨夫人”的洞府，但这一设定只限于影视版本的《西游记》，而不是古书版本的《西游记》。由于白骨洞这一洞名比较出名，被影视改编广泛流传而广为人知，被很多人普遍默认为是白骨夫人的洞府，殊不知白骨洞最初的记载是《封神演义》里石矶的洞府，而非《西游记》原著书中的洞名。现代出现的同人作品经常存在误导性的设定。
明代小说《西游记》书中的白骨夫人所在的地方是白虎岭，而不是白骨洞，更不是骷髅山，也就是说，明代小说《西游记》书中没有出现“白骨夫人住在白骨洞”这一设定。“白骨洞”这一设定是《封神演义》首先创用的，而且是石矶娘娘的住所，不是白骨夫人的住所。“骷髅”是脊椎动物（包括海陆两界的所有哺乳生物）的骨骼，俗称白骨，因此“骷髅山”和“白骨洞”这个山名和洞名互相有些字义上的重复。同时骷髅山白骨洞这一名字近似物如其名之流。《封神演义》书中总共出现两处骷髅山白骨洞，但是否为重名的两个地方也有待推论，一个是前期石矶娘娘所在的骷髅山白骨洞，一个是后期出现的马元所在的骷髅山白骨洞，因此被默认为这是同一个地方，也被认为可能是两个地方使用同一个名字，因此部分读者常把石矶和马元联系在一起，甚至认为这两个角色是互相认识的朋友关系，又或者是其他的关系。而且骷髅山是有现实对应的地点，比如2011年的综艺纪录片《传奇中国》第54集的“哪吒传说”中，节目组就到了四川江油及宜宾地区考察，据江油的本地人介绍称这里的一处山脉就叫骷髅山，洞名叫白骨洞，或石矶洞、骷髅洞，并说这里是传说中石矶娘娘的洞府，与古代小说《封神演义》里的描述大为相似。因此民间一些地方传说此山为白骨堆砌。
在动画片《哪吒传奇》中，骷髅山是大魔头石矶娘娘的地盘，动画正片绘制的场景中，可以看到骷髅山如同它的名字一样恐怖，刚进入洞穴就能看见遍地到处都是骷髅白骨，甚是阴暗，那累累的白骨骷髅如山都是被石矶残害的生灵。常年荒山野岭几百里荒无人烟，基本上没有什么人敢来到此山，因为山上妖洞中有一块悬浮在空中的紫色石头，后来这块石头修成女子人形，也就是石矶娘娘的人类形态。在很久以前，整座山的本地住民早都被石矶吃的毛发不剩，导致许多的骷髅、白骨堆积如山，因此形成阴森恐怖的“骷髅山白骨洞”。石矶因为祸人间，被女娲娘娘镇压在擎天柱下，后来因申公豹的帮助，再次恢复人形祸乱人世，最终石矶被哪吒彻底消灭，骷髅山白骨洞从一座魔头住所变成了无人问津的废墟。