歐陽修娶楊氏為妻，在景祐元年（1034年），楊大雅死于明道二年（1033年）四月十日，當時在亳州知州任上。也就是說，歐陽修娶楊氏時，老丈人已經(jīng)去世。他雖然沒能在楊大雅生前借上力，但楊大雅的余蔭，也足以讓歐陽修的身價再次提升。
景祐元年（1034年），歐陽修被召試學士院，授官宣德郎，回京任館閣?？?，參與編修《崇文總目》。
第二年，不幸發(fā)生了。與歐陽修結(jié)婚才十個月的楊氏，景祐二年（1035年）四月病逝。歐陽修曾寫過《諫議大夫楊公墓志銘》，自注作于這一年，應該是夫人楊氏在世時所作。
楊氏十分嬌艷，行動如弱柳扶風。歐陽修和她“有過干畫眉者的夫婦之私”。漢代張敞為美妻畫眉，后代傳為佳話。歐陽修猶過之，日日與楊氏如膠似漆。偶有離別，楊氏流淚：“花似伊，柳似伊，花柳青春人別離。低頭雙淚垂?！?p> 宋仁宗時，北宋王朝積貧積弱的弊病開始顯現(xiàn)，貧富差距拉大，社會矛盾日益突出。景祐三年（1036年），與歐陽修交往頗深的范仲淹著手呼吁改革，他把社會問題歸咎為腐敗，而歐陽修看得更深刻，認為冗官冗員是根本問題。
當時主張改革政治的范仲淹因批評弊政，與宰相呂夷簡發(fā)生沖突。呂夷簡給范仲淹加上“越職言事，離間群臣，引用朋黨”的罪名，范仲淹由此被貶饒州知州。
這時候，身為諫官的高若訥，面對范仲淹被貶的錯誤處置，非但不諫，反而落井下石，跟在呂夷簡的后面詆毀范仲淹。歐陽修對此非分不滿，于是專門寫了一篇《與高司諫書》支持范仲淹。這樣一來，歐陽修作為范仲淹一派也受到牽連，被貶為夷陵（今湖北宜昌）縣令。
這對于一位有遠大抱負的人來說，無疑是致命的打擊。為此，歐陽修心灰意冷，在去夷陵的路上感慨萬千，寫下了很多的感傷之作。
歐陽修到達云夢（今湖北安陸）地區(qū)時，寫下了《宿云夢館》一詩，以此來訴說內(nèi)心的憂愁，還有對于妻子楊氏的思念：
“北雁來時歲欲昏，私書歸夢杳難分。
井桐葉落池荷盡，一夜西窗雨不聞?！?p> 開篇就直抒胸臆沒有任何的過渡，這種寫法可以更明顯地突出詩人的個性，還有情感的變化，“北雁來時歲欲昏，私書歸夢杳難分”，北來的大雁也意味著歲暮的到來，眼看著一年又要結(jié)束了，而我卻是去被貶的路上。宿云夢館時，我在夢中收到了妻子的來信，這勾起了我對于故鄉(xiāng)的思念，夢里懵懵懂懂好像是回到了故鄉(xiāng)，還見到了妻子，可是醒來后才發(fā)現(xiàn)，依舊還是在異地他鄉(xiāng)。
最后兩句可謂是情景交融，寫得更加的傷感，使得整首詩有著一種淡淡的憂傷，“井桐葉落池荷盡，一夜西窗雨不聞”，夢醒之后傷心不已，只好推開窗戶，看到滿地的梧桐樹葉，遠處池塘里的荷花也早已枯萎了，正好是下了一整夜的雨，但是由于自己一直在睡夢中，并沒有察覺，沒有聽到外面的雨聲。這兩句重點是突出心境的變化，由于醒來后悲痛萬分，再加上下過了雨，讓歐陽修感傷不已。
在夷陵的幾年，歐陽修一邊整頓吏治、健全規(guī)章制度，一邊調(diào)整自己的心態(tài)，得益于對韓愈文集的研究，歐陽修的文學修養(yǎng)也越來越高。
景祐三年（1036年）元宵節(jié)，而立之年的歐陽修站在夷陵街頭，看著元宵節(jié)璀璨的燈火，越熱鬧，越孤獨，心中酸澀油然而生。
他想起去年元宵節(jié)跟楊夫人一起約會觀燈的情景。
去年還是夫妻雙雙秀恩愛，今年就是陰陽兩隔。歐陽修觸景生情，寫下千古佳句《生查子·元夕》：
“去年元夜時，花市燈如晝。月上柳梢頭，人約黃昏后。
今年元夜時，月與燈依舊。不見去年人，淚濕春衫袖?！?p> 多浪漫的夜晚，多刻骨銘心的痛！
景祐四年（1037年），鰥居兩年后，歐陽修迎娶了第三任夫人薛氏，乃是名臣薛奎的千金。
薛奎的官做得比胥偃和楊大雅都高，曾任陜西轉(zhuǎn)運使、淮南轉(zhuǎn)運副使、延州（陜西延安）知州；天圣元年（1023年）四月知開封府，次年七月，升任御史中丞（御史臺最高長官）；天圣六年（1028年）三月，再升三司使（經(jīng)濟部門最高長官）；七年（1029年）二月，拜為參知政事。歐陽修中進士時，薛奎已經(jīng)是當朝副相了。明道二年（1033年），薛奎因病辭去相位，次年八月薨逝，享年六十八歲。
歐陽修在為薛奎寫的墓志銘中說他，為開封府尹時“以嚴為治，肅清京師。京師之民至私以俚語目公，且相戒曰：‘是不可犯也！’”看樣子一點兒也不比包公手軟。
可惜這位薛參政子息不旺，只有一個兒子還早早兒死了，女兒一大堆，成人出嫁的就有“五朵金花”。據(jù)墓志，歐陽修娶的是薛家老四，而且一直陪伴他的后半生。老三嫁給了歐陽修的同榜進士王拱辰——天圣八年的狀元。
歐陽修和王拱辰，從沒中進士時就開始較勁兒了。
歐陽修銳意奪取狀元郎，頭一夜特地準備了一件新衣，沒想到被王拱辰看見先穿上了。歐陽修問他為何如此，王拱辰答道：“這件新衣應該狀元穿啊！”歐陽修很不服氣。誰知第二天唱名時，狀元果然是王拱辰，歐陽修大為失意。
王拱辰的心眼兒比歐陽修活泛，所以入仕后這對“擔兒挑”并不相合，后來黨爭出現(xiàn)，兩個人也處在不同的政治營壘當中：歐陽修贊成杜衍、范仲淹等人改革弊政，王拱辰卻站在保守派一邊，甚至促成了杜衍女婿蘇舜欽的冤案。雖然礙著同門女婿的面子不便反目成仇，但兩人的關(guān)系一直貌合神離，遇到合適的機會，歐陽修還會不失時機地惡心王拱辰幾句。
后來，王拱辰娶的薛家老三不幸去世，薛家又把老五嫁給了他。歐陽修寫了首打油詩，其中兩句說：“舊女婿為新女婿，大姨夫作小姨夫。”這回歐陽修總算壓了王拱辰一頭：原來我是你妻弟，今天我終于成了你大舅哥了！
第三位夫人薛氏，陪伴歐陽修多年，兩人感情極好。
康定元年（1040年），歐陽修被召回京，復任館閣?？保幮蕖冻缥目偰俊?，后奉命知諫院。