엘리베이터 사용때문에 상가 불만

자재 반입 때문에 엘리베이터 사용하고 있는데요 사용관련 해서는 미리 관리사무소에 날짜랑 시간 전달했고 사람 많은 시간대에는 최대한 피해서 짧게쓰려고 신경 썼습니다... 근데 얼마전부터 상가 사장님들 사이에서 엘리베이터 때문에 손님들이 불편해해서 장사에 방해가 된다는둥 말이 나온다고 하는데요 실제로는 10분 정도만 쓰고 바로비워주고 있고 관리사무소에서도 괜찮다 하는데... 분위기가 안좋아져서요;;; 괜히 민폐끼치는거 같아서 스트레스가 장난 아니네요 이럴땐 어떻게 해야할까요?