仪殿和皇后的立政殿外，还有许多空置的宫殿可供人居住，其中，最大最好的就是武德殿，于是太宗就琢磨着让老四住进去，但被群臣劝阻，于是只好作罢。
老四的王府贞观十一年才修好，那么老四之前住在哪呢？答案是：太安宫。
太安宫，又称大安宫，初名弘义宫，是一处特殊性质的宫殿区，它也在长安，不过位置比较偏——优点是清静，缺点是太清静。
此宫始建于武德五年（公元622年），是当时的皇帝李渊（李治的爷爷）为秦王李世民（李治他爸）特意修建的宫殿。那时，李治的爷爷也是生了好多儿子，但活着的嫡子好巧，跟李治他们这辈人一样，也是三个：嫡长子李建成、嫡次子李世民、嫡四子李元吉（嫡三子李玄霸早逝）。其中，嫡长子李建成在大唐建国后被册立为太子，李世民被封为秦王。
李渊是大唐的开国皇帝，他这三个儿子，在大唐建国中，都立下功勋，但是，三个儿子中，老二李世民不仅功劳最大，而且手下还聚集了一班能人，朝中颇有声望，于是，他跟太子之间，关系开始微妙起来……
武德五年时，大唐建国才五年，李大和李二这两位皇子间的对立已经由暗转明，可能是本着“距离产生美”的理念，李渊修