これって不倫されているのでしょうか？

最近…夫の帰りが遅く、仕事が忙しいとは聞いていたのですが…この前ふと夫の携帯の画面が目に入ってしまい、女性らしき名前の人から連絡が来てるのが見えてしまいました。
その日から、よく思い返すと、私より先に帰って来ていたり休みの日でも誰かと電話してたり…携帯画面を見て笑みを浮かべてたりと、前はなかったようなことが度々あって…それについて聞いてみると、「なんでもないよ」とか「友人と話していた」と回答され、本当なのか疑っています…。
私自身どうしていいかわからないので…確かめる方法や何かしらのアドバイスいただけると助かります。