年輕的太子，長得是儀表堂堂，因此，常有很多貴門的少女，王族的千金，想博得他的寵愛。豪華的宴會，歡狂的歌舞，一日都不停息地煩擾著太子。
淨飯大王的心中也是這樣的打算，他以為唯有這樣才可以使太子不致生起出家的念頭，使阿私陀仙的預言不至於成為事實。
然而太子為這些歌舞宴會，反而增添不少的憂鬱與厭惡。
淨飯大王見到如此情形，更是憂愁萬分!
他想：太子的品性，高尚忠厚，是國民崇拜敬仰的;太子的武藝，超群英勇，是鄰國聞名而畏懼的。想不到這麼一位賢德的太子，竟把榮華富貴看得那麼沒有價值。
淨飯大王想改變太子這鬱鬱不樂的性情，除了用財寶女色之外，又想不出其他的辦法。
他命令集合全國有名的建築工程專家營造四時宮殿，讓太子沒有春去秋來的感覺，裡面終日不是管弦樂聲，就是豪華歌舞，但是，這一切的一切，仍然不能增加太子的歡心!
這不是沒有原因，聰明的太子，雖然深居在內宮之中，但他已體察到當時印度社會階級懸殊的情形。他懷疑人與人之間為什麼會那樣的不平等，勞苦的大眾為什麼不能獲得美滿的生活和自由，如何改造這不平等的社會，這些問題早已盤旋在悉達多太子的心中。
而且，他猶記得幼時被父王帶去視察農村社會的情形。在農村，見到人人都是流著汗珠在辛勤地勞動，烈日當空，也得不到休息。而父王和自己卻傘蓋車馬，任意地逍遙，這是多麼的不公平!
還有，他見到那些農田被掘翻的土內，有許多大大小小的昆蟲，正當他們要往土裡鑽的時候，卻被群鳥飛來爭先恐後地啄食。弱肉強食，這是多麼的殘酷和無情!這是多麼的恐怖和痛苦!
在這時候的太子，他並不是厭惡這世間，也不是憂愁自己沒有快樂，而是目睹社會的不平，眾生的痛苦，所以鬱積在心頭的愁思，始終不能釋去。
淨飯大王見到他鍾愛的太子沉思默想，心中增加無限的憂愁。所以，在太子十七歲的時候，就替他選了美麗的耶輸陀羅為妃。他以為太子若有一位美麗的妻子，可能會使他轉憂為喜。
耶輸陀羅公主，是迦毗羅衛鄰國天臂城主善覺王的長女，窈窕的姿態，像仲春季節的柳絮;美好的嬌容，像初降人間的仙子;淨飯大王以為用女人、醇酒、音樂三者，總可以縛住太子出塵的心。
雖然，太子難免這種人性的要求，但他認為這種快樂總不是長久滿足的人生，表面上看來，太子有時候也會浮現出微笑，而他的內心深處卻是益感空虛和孤獨。
淨飯大王看到太子間或露出笑容，他心中是異常高興。他發願從此要靜修德行，垂布仁慈，廣行德政，親近聖賢，遠離惡友，對臣民要慈顏愛語;日常的生活，要戒除輕舉妄動。他不但自己一人如此，他更命令大臣及全國的婆羅門，廢棄謀權術數，學習治國濟世之法，祭祀一切諸天善神，祈禱萬民平和安樂，以這一切，來至誠地為太子祝福。淨飯大王此時的心和原始純樸的人心一樣。
就這樣，聰明的悉達多和美麗的耶輸陀羅妃，在幸福歡樂的王宮之中，生下一個王孫羅睺羅。
淨飯大王心中高興地想著：「我愛我的太子悉達多，悉達多一定愛子如我愛他，那麼，他當然不會生起出家的思想，這是我唯一的希望。」
世間無論哪一個國王，對他的太子，都怕將來生性流於放縱，沉迷情慾，容易染著聲色的快樂。可是淨飯大王卻和這種念頭相反，自從悉達多太子長大以後，他的心中就無時不在希望太子能恣情縱慾，愛名好利，千萬不能在年輕的時候就有悠閒的思想。其他的聖者修行得到金剛的大道，都是他享盡現實世間的快樂以後才去修行。現在是應該自己讓位給太子而去山林深處修行，因為這時太子正該享受人間福樂的時候。太子的一切，一定要特別的注意與關懷。