手書きの誓約書の効力

今回公正証書を作るに際し、相手の両親を
連帯保証人になってくれないのですかね。
なってくれれば問題ないですね。
誓約書と公正証書の関係が問題に
なるかもしれませんね。
誓約書は、公正証書に変更されたと。
しかし、公正証書に、連帯保証人になって
くれないとした場合、誓約書はあったほうが
もちろんいいですが。
誓約書をたてにして、連帯保証人に
なってもらうのが一番いいですけどね。

1度目の浮気の時に書いてもらった誓約書は、離婚を前提としたものではないのでしょうか。
その誓約書を書いてもらって、その時離婚することになったのであれば、別に公正証書でなくても効力はあったわけです。
しかし、その時は離婚するまでには至らず、この度離婚することになって、慰謝料、養育費、家のローン返済などについて話合いがまとまった段階で公正証書を作られるということであれば、新しく取り決めた公正証書の内容だけがあなたと夫が離婚するに当たって、取り決めた約束事となるでしょう。
一度目の誓約書に夫の両親が保証人としてサインしていると言っても（もし、保証人としてのサインでなくて、単に立会人としてのサインであれば、意味がありませんが）、この度、離婚するに当たって、夫が支払えないときには夫の両親が保証人として責任を持つ、ということを改めてその公正証書で誓ってもらわないと、万一、夫が支払いを滞ったときに両親に保証人としての責任を追及することは無理だと思われます。
ご質問の文面からは以上のような回答しかできませんが、法テラス（0570-078374）の無料法律相談を利用されたら、何かいい方法を助言してもらえるかもしれませんので、念のためご紹介しておきます。

公正証書にするには，お互いが合意し公証役場に立ち会う必要があります。誓約書を書いた当時と現在の心情は異なる可能性があります。
義父母のサインがあるということですが，旦那さんの連帯保証人になるというニュアンスまで読み込めるかどうかやや疑問があります。