他本有九男十女，但不幸的是，有三子都死于他之前。尤其是道光十一年，长子奕纬的去世对他的打击很大。奕纬死的那年，道光帝已近天命之年，老年丧子使他几近绝望，皇四子和皇五子奕詝、奕誴在之后的一年中相继降生;两年之后，皇六子奕?也出世了，随后又有三个更小的皇子诞生。

　　晚年的道光帝在享受天伦之乐的同时也在为挑选皇位继承人的问题犯愁。他的九个儿子中，最后三个因为年龄太小不予以考虑;而五皇子奕誴生性耿直，举止粗鲁，不拘礼节，向来不得他欢喜，甚至将其过继给已去世八年并且没有子嗣的三弟悖恪亲王绵恺，奕誴也因此被放在皇位继承人的范围之外。

　　最终，最有可能继承王位的就是奕詝和奕?。而两兄弟也让道光帝十分为难，因为论文成武德，奕?远胜獐头鼠目且跛足的奕詝;但老成持重方面，奕詝又远胜过奕?，这点道光很是看重。

　　传说道光多次把奕诉的名字写进了立储的密匣子，准备立他为皇位继承人。但他考虑来考虑去，觉得奕詝是长子又没有什么大的过失，如果废长立幼，不合传统。但又认为奕?才有帝王风范，所以直至晚年也一直下不了决心。

　　奕詝和奕?的师傅都想帮助自己的弟子在道光帝面前讨得欢心，以夺得皇位。奕詝的师傅杜受田对道光帝了解颇深，一次道光帝带宗室子弟到南苑去打猎，杜受田在出发前悄悄地告诉奕詝：“等到了围场，阿哥坐观他人骑射就好，自己千万别发一枪一矢，也不准手下人捕一猎物。皇上要是问起来，你就说时方春和，这是鸟兽孕育生命的时候，不忍伤害生命，以干天和，且不想以弓马之长与诸弟竞争。这样说的话，一定讨了皇上的欢心。”奕詝听后，照计行事。果然，在打猎的时候，好强争胜的奕?果然收获最多，而奕詝这边却一只猎物都没有。道光帝自然奇怪，便问奕詝是怎么回事，奕詝按照师傅教的话说了一遍，道光帝听后果然大喜。

　　道光帝驾崩的前几年一直都疾病缠身。有一天，他命人将奕詝和奕?两兄弟召来。两人的师傅一听，感觉到事情意义非凡，很有可能是道光要在弥留之际对皇位继承人做一个抉择，于是赶紧给自己的徒弟出主意。奕詝的师傅卓秉恬告诉他，皇上问话时，要充分展示自己的才能;奕詝的师傅杜受田知道奕詝嘴笨才拙，反应也比不上奕?，就告诉他：“如果皇上说自己将不久于辞世，问起今后国策的话，你什么都不要说，只管痛哭流涕，以表孺慕之诚就可以了。”两兄弟到了那里后，道光果然问起自己辞世之后国家该如何治理，奕詝按照师父的指示上前抱住道光的腿痛哭，道光见后很感动，觉得他仁孝，是一国之君的材料。

　　道光当朝，最讲求平庸，拿他最宠信的大臣曹振镛来说，他说过一句话：“多磕头，少说话”，这就是当时的为官之道，也是道光帝的为政特征。要说道光帝最终选择了奕詝作为皇位继承人的原因，就是因为在老成持重这一方面，奕詝的确有道光帝的几分风采。

　　因此，道光帝最终选择了奕詝作为继承人，就是日后的咸丰皇帝。