位于大岗山的南边，北与大岗山相依偎，状如母亲带子，东傍阿公店水库，南望北屏山，西与漯底山遥遥相对，形势险要，系属于台地的小方形山，所谓方山者乃水平岩层受风化及切割作用后形成平顶山，然后台地面顶逐渐缩小而成者。小岗山外形隆起的珊瑚礁与大岗山相似，最高点约达250公尺，最宽处一.六公里，山顶有珊瑚礁石灰岩，下层是青灰色砂质页岩层，小岗山表层系一小透镜状珊瑚礁石灰岩，地层受侵蚀作用而成。

小岗山棱线上一块凸出的礁石，形如古人的官帽，以其形象称为「纱帽石」，当地居民称其为「皇帝座」，因其形不但像一座庞大的沙发，更像一做神龛。此处已是当地居民休闲活动的好去处。规划有登山步道、好汉坡、好汉亭、乐山亭等休憩点。小岗山也已成为冈山区的地标。