張作霖覺得， 自己兒女的婚姻應該貢獻給自己家族的事業， 所以張家的子女在很早的時候就訂婚了， 唯獨張作霖的三女兒張懷瞳沒有訂婚， 後來曾經擔任過東三省都督的趙爾巽來為自己兒子提親， 張作霖卻不由分說拒絕了。 要知道趙爾巽家族聲名顯赫， 勢力龐大， 為何張作霖不把自己女兒嫁給他兒子呢？
張學良晚年的時候， 回憶起這件事， 說出了原因。 原來， 張作霖家跟趙爾巽家很熟悉， 張學良平常見到趙爾巽， 都會叫他爺爺， 換算起來趙爾巽的兒子趙世輝， 是張學良這一輩的叔叔， 張作霖覺著自己女兒嫁給趙世輝， 違背了倫理， 所以就沒有把自己女兒嫁給他。
實際上， 張作霖之所以不那麼做， 主要是因為趙爾巽對張作霖有很大的恩情， 張作霖一直對趙爾巽持晚輩的身份， 不敢讓自己女兒高攀趙爾巽的兒子。 張作霖本來是東北一個土匪， 後來被趙爾巽看重， 提拔為清朝官員， 在接下來張作霖立功升遷當中， 也是趙爾巽幫他從中周旋， 可以說， 張作霖能有後來的成就， 跟趙爾巽的幫忙分不開。 沒有趙爾巽， 就沒有後來的東北王張作霖。
不過， 最終張懷瞳還是跟趙世輝在一起了， 原因是晚年張學良幫兩人牽線搭橋。 張學良回憶， 說當時張作霖拒絕了趙爾巽的提親之後， 自己也覺著後悔， 說自己說的太莽撞， 會不會趙爾巽認為自己是看不起他？實際上自己根本沒這個意思。 但是還沒等著張作霖解釋， 趙爾巽就先去世了， 所以這件事就稱為張作霖心中一個遺憾。