41歳男 浮気で離婚 まだ許されないのかとショックです。

41歳の会社員です。
現在、私は彼女と同棲中です。
彼女は9歳年下の32歳で、付き合って間もなく5年が経ちます。

普通なら年齢的にも交際期間的にも結婚という流れになります。
しかし、私たちの場合、結婚をしたいのに結婚することができません。

それは彼女の家族から猛反対されているからです。
原因は私の離婚歴です。

私は23歳の時、当時の彼女が妊娠したことをきっかけに入籍し、その年に息子が生まれました。
しかし、2年後、私の浮気が原因で離婚することになり、息子は妻が引き取ることになりました。
離婚後は息子とは会うことが許されず、毎月5万円の養育費を支払い続けています。

今の彼女と付き合うようになり、初めて交際の挨拶をしに、家にお邪魔した時、私の離婚歴を包み隠すことなく正直に伝えた上で、彼女と結婚を前提に付き合わせて欲しいとお願いしました。
しかし、彼女の家族は反対でした。

特にお父さんは烈火のごとく激怒しました。
彼女は一人っ子です。
若い頃の話とはいえ、子どもがいるのに浮気をして離婚されたような甲斐性なしの嫁には行かせられないと、殴られかねない勢いで言われました。
全く話が聴いて貰えず、その日は仕方なく退散しました。

その後、何度も話をしようと思い、打診しましたが、今度は会ってもくれません。
私のことが原因なので、私はどんなことがあっても低姿勢を貫きましたが、彼女の堪忍袋の緒が切れてしまいました。
一年ほど経ったある日、家族会議で、全く理解のない両親に対して爆発してしまい、両親も売り言葉に買い言葉で、ひどい言い合いになり、最終的にお父さんが彼女を勘当してしまいました。

それをきっかけに、彼女の家族との連絡が途絶えてしまい、結婚の話は暗礁に乗り上げてしまいました。

私自身は若い頃の過ちだし、あれから年を取り同じ失敗をしないだろうと思っていますし、覚悟はあります。
しかし、世間の評価は違います。
離婚は一度とはいえ、立派な実績として評価されます。
もちろん、マイナスの評価です。

離婚後、自分の軽率な行動を反省し心を入れ換えて生きてきたのですが、全く理解されないと分かり、本当にショックです。
大人としての責任をきちんと果たしているのに、世間は離婚とその原因の浮気をした私という過去しか、評価の対象として見ていません。

先方の一家が、私の離婚の事実を嫌悪しているのも価値観の問題だし、感情を変えることは難しいと思います。

正直、今の私はどうして良いのか分かりません。