43歳 男性 です。
私には妻と5歳になる子供がいます。

コロナ禍の５月に、同じ職場の女性から告白されました。その女性は20代後半で独身なのですが、
それよりも面と向かって急に告白されたことに驚いてしまいました。この時代に告白？ってその時は正直引きました。

また私が既婚者であることを知っているにも関わらず告白してきたのです．．．裏があるのではないかと勘ぐっていました。

適当にあしらってはいたのですが、日に日に彼女に惹かれている自分がいるのです。この歳になって恋？
と、いけないとは思いつつも、少しずつ彼女との距離が近くなっています。

今まで告白されたことなど無かったので舞い上がっている自分がいます。

この歳でこういう気持ちになってしまう自分。私がしようとしていることは不純極まりないですが、確実に好きになっています。

自分の気持ちを抑えるにはどうしたらいいのでしょうか。

人間の永遠のテーマの一つですね。
異性から少なからず好意を向けられれば、こちらも段々その気になっちゃう。そんなほろ苦い経験を持つ方も多いのでは。頭では「いけない」と分かっているのに、自分の心であるのに思う通りにいかない。ままなりませんね…。
bantanさんは、きっと魅力ある男性なんでしょう。

まずは御自身の気持ちを、ありのままに受け入れ認めてみては？
その上で、その赴くままに行動した先がどうなるのか、より具体的にイメージしてみるしかないのかもしれません。

私も若い頃に似たようなことがありましたが、奇跡的に？無難に夫婦生活を続けています。
あまり参考にならなかったらごめんなさいね。