私がするべきことを教えてください。

今後連絡を取り続ければ、慰謝料に発展するかもしれませんが、現段階で
終了するなら、追ってはこないでしょう。
不倫の事実がありませんからね。
結婚していたことも知りませんしね。
安全圏内にいると思います。

　彼の妻から慰謝料の請求があるかの問題は，時期と認識で決まります。彼女が彼と結婚して妻となったことをあなたが知った後に，あなたが彼と肉体関係を持てば不貞となります。彼の妻は彼との性行為の独占使用権がありますから，あなたがその独占的使用権を侵害したとして不法行為による慰謝料請求ができます。しかし，結婚する前は彼女には独占的使用権はありませんから，誰が彼と性的行為をしようと自由です。不法行為は成立しませんから慰謝料請求はできません。また不法行為は故意に（知った上で）行うことですから，あなたが彼女の結婚を知る前であれば，やはり不法行為は成立しませんから慰謝料請求はできません。従って，彼の妻になったことを知った後，彼との肉体関係が無ければ，彼の妻の慰謝料請求があっても無視すればよいのです。
　ただし，あなた自身不倫関係と認めているように，あなたとの性行為の独占使用権はあなたの夫にあります。あなたが結婚していることを彼が知っていた場合には，あなたの夫から彼に慰謝料請求ができます。さらにあなたの夫はあなたに不貞を理由に離婚と慰謝料を請求できます。
　彼の妻があなたが結婚していることを知れば，あなたの夫に暴露すると言って脅してくる可能性があります。この時どう対応するかを考えておかなければなりません。断固拒否して脅迫又は恐喝で警察に被害届を出すか，許容できる金額で示談をして，夫に知られないように秘密を守るか。この場合一人で対応するのは危険です。弁護士に相談しましょう。