秋の除目（じもく）に源氏を太政大臣に任じようとあそばして、内諾を得るためにお話をあそばした時に、帝は源氏を天子にしたいかねての思召しをはじめてお洩（も）らしになった。源氏はまぶしくも、恐ろしくも思って、あるまじいことに思うと奏上した。
「故院はおおぜいのお子様の中で特に私をお愛しになりながら、御位（みくらい）をお譲りになることはお考えにもならなかったのでございます。その御意志にそむいて、及びない地位に私がどうしてなれましょう。故院の思召しどおりに私は一臣下として政治に携わらせていただきまして、今少し年を取りました時に、静かな出家の生活にもはいろうと存じます」
　と平生の源氏らしく御辞退するだけで、御心を解したふうのなかったことを帝は残念に思召した。太政大臣に任命されることも今しばらくのちのことにしたいと辞退した源氏は、位階だけが一級進められて、牛車で禁門を通過する御許可だけを得た。帝はそれも御不満足なことに思召して、親王になることをしきりにお勧めあそばされたが、そうして帝の御後見をする政治家がいなくなる、中納言が今度大納言になって右大将を兼任することになったが、この人がもう一段昇進したあとであったなら、親王になって閑散な位置へ退くのもよいと源氏は思っていた。源氏はこんなふうな態度を帝がおとりあそばすことになったことで苦しんでいた。故中宮のためにもおかわいそうなことで、また陛下には御煩悶（はんもん）をおさせする結果になっている秘密奏上をだれがしたかと怪しく思った。命婦は御匣殿（みくしげどの）がほかへ移ったあとの御殿に部屋をいただいて住んでいたから、源氏はそのほうへ訪（たず）ねて行った。
「あのことをもし何かの機会に少しでも陛下のお耳へお入れになったのですか」
　と源氏は言ったが、
「私がどういたしまして。宮様は陛下が秘密をお悟りになることを非常に恐れておいでになりましたが、また一面では陛下へ絶対にお知らせしないことで陛下が御仏の咎（とが）をお受けになりはせぬかと御煩悶をあそばしたようでございました」
　命婦はこう答えていた。こんな話にも故宮の御感情のこまやかさが忍ばれて源氏は恋しく思った。
　斎宮（さいぐう）の女御（にょご）は予想されたように源氏の後援があるために後宮（こうきゅう）のすばらしい地位を得ていた。すべての点に源氏の理想にする貴女（きじょ）らしさの備わった人であったから、源氏はたいせつにかしずいていた。この秋女御は御所から二条の院へ退出した。中央の寝殿を女御の住居に決めて、輝くほどの装飾をして源氏は迎えたのであった。もう院への御遠慮も薄らいで、万事を養父の心で世話をしているのである。秋の雨が静かに降って植え込みの草の花の濡（ぬ）れ乱れた庭をながめて女院のことがまた悲しく思い出された源氏は、湿ったふうで女御の御殿へ行った。濃い鈍（にび）色の直衣（のうし）を着て、病死者などの多いために政治の局にあたる者は謹慎をしなければならないというのに託して、実は女院のために源氏は続いて精進をしているのであったから、手に掛けた数珠（じゅず）を見せぬように袖（そで）に隠した様子などが艶（えん）であった。御簾（みす）の中へ源氏ははいって行った。几帳（きちょう）だけを隔てて王女御はお逢（あ）いになった。
「庭の草花は残らず咲きましたよ。今年のような恐ろしい年でも、秋を忘れずに咲くのが哀れです」
　こう言いながら柱によりかかっている源氏は美しかった。御息所（みやすどころ）のことを言い出して、野の宮に行ってなかなか逢ってもらえなかった秋のことも話した。故人を切に恋しく思うふうが源氏に見えた。宮も「いにしへの昔のことをいとどしくかくれば袖（そで）ぞ露けかりける」というように、少しお泣きになる様子が非常に可憐（かれん）で、みじろぎの音も類のない柔らかさに聞こえた。艶（えん）な人であるに相違ない、今日までまだよく顔を見ることのできないことが残念であると、ふと源氏の胸が騒いだ。困った癖である。
「私は過去の青年時代に、みずから求めて物思いの多い日を送りました。恋愛するのは苦しいものなのですよ。悪い結果を見ることもたくさんありましたが、とうとう終（しま）いまで自分の誠意がわかってもらえなかった二つのことがあるのですが、その一つはあなたのお母様のことです。お恨ませしたままお別れしてしまって、このことで未来までの煩いになることを私はしてしまったかと悲しんでいましたが、こうしてあなたにお尽くしすることのできることで私はみずから慰んでいるもののなおそれでもおかくれになったあなたのお母様のことを考えますと、私の心はいつも暗くなります」
　もう一つのほうの話はしなかった。
「私の何もかもが途中で挫折（ざせつ）してしまったころ、心苦しくてなりませんでしたことがどうやら少しずつよくなっていくようです。今東の院に住んでおります妻は、寄るべの少ない点で絶えず私の気がかりになったものですが、それも安心のできるようになりました。善良な女で、私と双方でよく理解し合っていますから朗らかなものです。私がまた世の中へ帰って朝政に与（あずか）るような喜びは私にたいしたこととは思われないで、そうした恋愛問題のほうがたいせつに思われる私なのですから、どんな抑制を心に加えてあなたの御後見だけに満足していることか、それをご存じになっていますか、御同情でもしていただかなければかいがありません」
　と源氏は言った。面倒（めんどう）な話になって、宮は何ともお返辞をあそばさないのを見て、
「そうですね、そんなことを言って私が悪い」
　と話をほかへ源氏は移した。
「今の私の望みは閑散な身になって風流三昧（ざんまい）に暮らしうることと、のちの世の勤めも十分にすることのほかはありませんが、この世の思い出になることを一つでも残すことのできないのはさすがに残念に思われます。ただ二人の子供がございますが、老い先ははるかで待ち遠しいものです。失礼ですがあなたの手でこの家の名誉をお上げくだすって、私の亡（な）くなりましたのちも私の子供らを護（まも）っておやりください」
　などと言った。宮のお返事はおおようで、しかも一言をたいした努力でお言いになるほどのものであるが、源氏の心はまったくそれに惹（ひ）きつけられてしまって、日の暮れるまでとどまっていた。
「人聞きのよい人生の望みなどはたいして持ちませんが、四季時々の美しい自然を生かせるようなことで、私は満足を得たいと思っています。春の花の咲く林、秋の野のながめを昔からいろいろに優劣が論ぜられていますが、道理だと思って、どちらかに加担のできるほどのことはまだだれにも言われておりません。支那（しな）では春の花の錦が最上のものに言われておりますし、日本の歌では秋の哀れが大事に取り扱われています。どちらもその時その時に感情が変わっていって、どれが最もよいとは私らに決められないのです。狭い邸（やしき）の中ででも、あるいは春の花の木をもっぱら集めて植えたり、秋草の花を多く作らせて、野に鳴く虫を放しておいたりする庭をこしらえてあなたがたにお見せしたく思いますが、あなたはどちらがお好きですか、春と秋と」
　源氏にこうお言われになった宮は、返辞のしにくいことであるとはお思いになったが、何も言わないことはよろしくないとお考えになって、
「私などはまして何もわかりはいたしませんで、いつも皆よろしいように思われますけれど、そのうちでも怪しいと申します夕べ（いつとても恋しからずはあらねども秋の夕べは怪しかりけり）は私のためにも亡（な）くなりました母の思い出される時になっておりまして、特別な気がいたします」
　お言葉尻（じり）のしどけなくなってしまう様子などの可憐（かれん）さに、源氏は思わず規（のり）を越した言葉を口に出した。

　忍びきれないおりおりがあるのです」
　宮のお返辞のあるわけもない。腑（ふ）に落ちないとお思いになるふうである。いったんおさえたものが外へあふれ出たあとは、その勢いで恋も恨みも源氏の口をついて出てきた。それ以上にも事を進ませる可能性はあったが、宮があまりにもあきれてお思いになる様子の見えるのも道理に思われたし、自身の心もけしからぬことであると思い返されもして源氏はただ歎息（たんそく）をしていた。艶（えん）な姿ももう宮のお目にはうとましいものにばかり見えた。柔らかにみじろぎをして少しずつあとへ引っ込んでお行きになるのを知って、
「そんなに私が不愉快なものに思われますか、高尚（こうしょう）な貴女（きじょ）はそんなにしてお見せになるものではありませんよ。ではもうあんなお話はよしましょうね。これから私をお憎みになってはいけませんよ」
　と言って源氏は立ち去った。しめやかな源氏の衣服の香の座敷に残っていることすらを宮は情けなくお思いになった。女房たちが出て来て格子（こうし）などを閉（し）めたあとで、
「このお敷き物の移り香の結構ですこと、どうしてあの方はこんなにすべてのよいものを備えておいでになるのでしょう。柳の枝に桜を咲かせたというのはあの方ね。どんな前生（ぜんしょう）をお持ちになる方でしょう」
　などと言い合っていた。
　西の対に帰った源氏はすぐにも寝室へはいらずに物思わしいふうで庭をながめながら、端の座敷にからだを横たえていた。燈籠（とうろう）を少し遠くへ掛けさせ、女房たちをそばに置いて話をさせなどしているのであった。思ってはならぬ人が恋しくなって、悲しみに胸のふさがるような癖がまだ自分には残っているのでないかと、源氏は自身のことながらも思われた。これはまったく似合わしからぬ恋である、おそろしい罪であることはこれ以上であるかもしれぬが若き日の過失は、思慮の足らないためと神仏もお許しになったのであろう、今もまたその罪を犯してはならないと、源氏はみずから思われてきたことによって、年が行けば分別ができるものであるとも悟った。
　王女御は身にしむ秋というものを理解したふうにお返辞をされたことすらお悔やみになった。恥ずかしく苦しくて、無気味で病気のようになっておいでになるのを、源氏は素知らぬふうで平生以上に親らしく世話などやいていた。
　源氏は夫人に、
「女御の秋がよいとお言いになるのにも同情されるし、あなたの春が好きなことにも私は喜びを感じる。季節季節の草木だけででも気に入った享楽をあなたがたにさせたい。いろいろの仕事を多く持っていてはそんなことも望みどおりにはできないから、早く出家が遂げたいものの、あなたの寂しくなることが思われてそれも実現難になりますよ」
　などと語っていた。
　大井の山荘の人もどうしているかと絶えず源氏は思いやっているが、ますます窮屈な位置に押し上げられてしまった今では、通って行くことが困難にばかりなった。悲観的に人生を見るようになった明石（あかし）を、源氏はそうした寂しい思いをするのも心がらである、自分の勧めに従って町へ出て来ればよいのであるが、他の夫人たちといっしょに住むのがいやだと思うような思い上がりすぎたところがあるからであると見ながらも、また哀れで、例の嵯峨（さが）の御堂の不断の念仏に託して山荘を訪（たず）ねた。住み馴（な）れるにしたがってますます凄（すご）い気のする山荘に待つ恋人などというものは、この源氏ほどの深い愛情を持たない相手をも引きつける力があるであろうと思われる。ましてたまさかに逢えたことで、恨めしい因縁のさすがに浅くないことも思って歎く女はどう取り扱っていいかと、源氏は力限りの愛撫（あいぶ）を試みて慰めるばかりであった。木の繁（しげ）った中からさす篝（かがり）の光が流れの蛍（ほたる）と同じように見える庭もおもしろかった。
「過去に寂しい生活の経験をしていなかったら、私もこの山荘で逢うことが心細くばかり思われることだろう」
　と源氏が言うと、

　あちらの景色（けしき）によく似ております。不幸な者につきもののような灯影（ほかげ）でございます」
　と明石が言った。

　だれが私の人生観を悲しいものにさせたのだろう」
　と源氏のほうからも恨みを言った。少し閑暇（ひま）のできたころであったから、御堂（みどう）の仏勤めにも没頭することができて、二、三日源氏が山荘にとどまっていることで女は少し慰められたはずである。