决定智力的基因，一般都是位于第23对染色体上，男性的性染色体是xY，X是来自母亲，Y是来自父亲。女性曲性染色体是Xx，第一个X来自母亲，第二个x来自父亲。由于男性是XY，所以男性的智力全部都是来自母亲的遗传；女性是xx，所以女性的智力是父亲和母亲各有一半影响。
当然，智力与良好的后天教育也有很大关系，因为产生智力的温床是大脑、而大脑约生长发育又受遗传和环境两方面因素的调节控制。但相比之下，就遗传而言，妈妈聪明的孩子大多聪明，如果是个男孩，就会更加聪明。原因在于人类与智力有关的基因主要集中X染色体上，女性有2个X染色体，男性只有1个，所以，妈妈的智力在遗传中就占有更为重要的位置。
虽然智力和某些遗传基因有关，但也受着外界环境的影响。如果父母有意识在智力方面给予培养，加上本身主观努力，刻苦求学，也能补救遗传缺陷。