オズモール　女性・OLのための情報サイト

今年で社会人3年目です。
部署は違いますが、職場の上司(妻子持ち31歳)の方と都合のいい関係が4月頃からありました。
初めは本当に尊敬できて、仕事の悩みをすごく親身になって聞いてくれてお兄ちゃん的な存在でした。
気にかけて下さってたので、恋愛感情ではなく考え方や仕事に対する姿勢が見習うところばかりで人間として好きでした。
でも段々とその上司の男の部分が見え初めてきました。その時にきっぱりと会わないという選択をすればいいことだったのですが、お世話になってる以上断れずにいました。
会ってる内に私の中でも尊敬から恋愛として好きになってきているのかなーと悩むようになりました。
付き合いたいとかは全く思わないですが、私から会いたいと言うこともありました。
そんな中途半端な関係が数ヶ月続き、本当に今のままでは向こうの立場もありますし、私自身も今の仕事が好きなので辞めたくないです。家族や子どものことを考えると何をしてるんだろうと遅いですがやっと思えました。
私から切るほど意思がまだ固まってないため、向こうから連絡こないようにするには興味をなくすようにするか、もう嫌われるかだと思いうざい性格になったりひつこくしたりと面倒臭いやつと思われるような態度を取りました。
すると、最近は一切連絡がなくなりました。(職場では直接関わらないので仕事に影響はないです)

今でもその上司のことを考えることがあり、やっぱり好きだったのかなーとか本音を言えば会いたいし、連絡取りたいですし、前のような関係に戻りたいと思ってしまいます。
でも家族のことを思うと、嫌われて正解だったと思っています。気づくのが遅かったですが、、

たまに職場で顔を合わせることもありますが、お互い何もなかったように挨拶する程度で終わっています。気まずい感じがありあきらかに距離はできてますが、、、

気持ちの整理がまだついておらず、文章もチグハグなものになって申し訳ないです。
この気持ちをなくすにはどうしたらいいでしょうか。
時間が解決してくれるでしょうか。