いつも主語を省略して話す人がいて、その人の意図が掴めずイライラ。これって私が悪いのかな？

いつも主語がない人がいて、その人の意図が掴めなくて苛々するんだけどこれって俺が悪いのかな？
察することが下手というか、そこまで頭回らないからちゃんと主語をつけてわかりやすく話してほしいんだが
わからないのは何かの病気だったりする？