我对象觉得我自私，想客观问下我有错吗

我和我对象在一起时间不长，他比我小，个性比较精明，我属于大大咧咧。我工作比较忙，他现在待业。平时我们一周大概见3-4次，周末基本上都在一起。我们爆发矛盾有2次，这是我主要想请大家客观审视的点。第一次矛盾，七月某个周六他陪了我大半天，陪我配钥匙，我找不到地方他先探好路在前面等我，然后我们一起在外面吃了个饭，后面回来陪我在按摩店按摩（他自己没按坐在那玩手机等我），按摩去的是熟悉的店，他和店长店员都打了招呼说我是熟人，店长在他不在的时候夸他做事妥帖。第二天我们约了下午去看想租的房子（不是同居，夏天想找个室内私密地方待着），但因为周六房东没回信息没定具体时间。他从中午和朋友打电话打了3个小时还没结束，我给他发了信息说看房，我先出发，他如果有时间就来，没时间就算了。他回复我他马上出发。等我到了目的地，给他打电话他开始对我一通吼，大意说我把他呼之即来挥之即去，时间地点都没确定就说爱来不来，我才发现定位忘了发给他，解释后他说他周六陪了我那么长时间，按摩时候也没丢下我一个人（按摩是最后一个行程且离他家近他当时可以先回家），现在他出门了我又说可以不来，属于通知性质，他很不喜欢被人通知干嘛，感觉我想干嘛就干嘛不考虑他很自私。这么热的天他完全可以不过来。吼了大概好几分钟，然后我就哭了，这件事变成不了了之。他后来完全以辩论的性质和我沟通这件事。第二次矛盾，今天我提前下班，我既想见他又想游泳，和他先讲的见面的事，后面说希望一起吃完晚饭后我就去游泳（大概见2个多小时），他就怒了说不见面了，具体聊天记录见截图。当时他说不出来真的浇灭了我一腔热血（我去他家在路上了）。我现在也不知道怎么跟他沟通，就很乱，这周也不太想见面。请情商高的朋友或有经验的朋友告诉我怎么处理比较合适。感谢🙏