大家对于阿旁宫最普遍的看法是秦始皇为了一个女子修建的，而这个女子的名字就叫做阿房，所以秦始皇给这座宫殿取名为阿旁宫。相传秦始皇十分爱慕这个叫做阿房的女子，但是历史上是没有这种记载的，关于阿旁女的身世来历也是一片空白，所以这种说法是没有事实依据的，多是后人编撰出来的一个人物。
可是无风不起浪，这座宫殿到底是为了谁修建的呢？有一种说法是秦始皇为了满足自己的私欲而修建的。关于这种说法也有很多人赞同。毕竟秦始皇为了自己死后能够住得好从十三岁继位的时候就开始修建繁华宏伟的秦始皇陵了，死了都要享受，更何况是活着呢！
据史料记载，秦始皇在征战六国的时候，只要打败了一个国家，他就会派人将那个国家的宫殿画下来，最后回到了咸阳，他就会让工匠将图纸上的这些宫殿重新修建，一定要尽量复原。据说后来在渭水北岸修建成了各具特色的“六国宫殿”如“冀阙”、“咸阳宫”、“甘泉宫”、“上林苑”等宫室有145处，宫殿有270座。如果这种说法真实可信，那当时的咸阳城该是多么繁华壮丽，跟现代的一线二线城市相比也绰绰有余。
公元前212年，秦始皇觉得以前秦国先辈们修的秦国皇宫太小了，因而召集了几十万人在渭水南岸修建更大更繁华的宫殿。由于这个工程太过巨大，所以秦始皇也只是草拟了一个名字，就是阿房宫。他本来是想等到宫殿修建完成的时候，再仔细的想一个好的名字，可是没想到秦始皇还没等到这些宫殿修建完工就去世了。后世的胡亥嫌麻烦，就决定还是沿用秦始皇生前所起的那个名字阿旁宫。