【職場恋愛】仲いい感じで自然に飲みに行く関係になりたいけど、最初の何気ない会話さえ難しい

不倫したいとかじゃなく、仲良く話して自然に飲みに行けるような仲になりたいけど、そもそも些細な会話すら成立させられていない時点でもう普通の人間関係としても脈無しなのかなと絶望する