家人的愛VS情人的愛...精神外遇

小弟有一個結婚7年的老婆
與兩個5歲與3歲的小孩
XXX老婆的女閨密
是我姊與老婆的很要好的前同事

老婆與"女閨密"認識4年多
每天下班就是聊LINE聊到睡覺
時常見面出遊(會帶孩子)
去年我就問過老婆"是否跟女閨密太親近了"
老婆回說"就只是好朋友而已"

最近與老婆相處的感覺越來不對勁
於是問了老婆
到底是發生了什麼事
不問還好
一問 心都涼掉了...

我:妳愛我嗎!?
老婆:不知道!?(之前都直接回答"我愛你")
OS:不對勁了
我:為什麼不知道!?
老婆:就是不知道...
我:是因為XXX!?
老婆:不知道!?
我:妳愛XXX還是愛我!?
老婆:不知道...
我:怎麼會不知道勒!?
OS:不對勁了...
省略一大段...
我:妳跟XXX告白了!?
老婆:嗯...
我:XXX的回應是!?
老婆:沒有迴避...
我:!?.........
(原來他們私下出去有時都會牽手.也會抱抱.也會說很想對方)
(最近手機都開始設密碼了.之前不會)
我:妳覺得這樣子的關係是對的嗎!?
老婆:我愛你跟愛XXX的愛是不一樣的...
我:哪裡不一樣!?
我:妳對我是親人的愛.對她是情人的愛!?
老婆:嗯...
我:我不想要這樣的愛...
省略一大段...
老婆:最後會在一起的是家人...

我有跟老婆說"我要去找XXX說清楚"
老婆說"如果我去找XXX.她就會離開"
我:離開我!?離開小孩!?
老婆:對.離開著個家.也離開這裡與XXX...(我們住南部.老婆是中部人)
(XXX的家人跟我的家人都認識.怕我去把一切都掀了.到時後鬧的不可收拾)

最後
我說給老婆一段時間去處理
她跟XXX的感情
希望妳與XXX能保持好距離
老婆也答應我會做到
但似乎...還是一樣...

這樣算是精神外遇嗎!?

為了兩個小孩
我實在不曉得該怎麼做!?...

在這裡
希望大家給我建議與方向
到底該如何正確的去處理這樣的事!?