近所の人らしき老夫婦が何度も私のアパートを訪ねて来ます。

2週間前くらいから面識はありませんが、近所の人らしき老夫婦が訪ねてきてチャイムを鳴らして来ます。
今のアパートに約2年住んでいて、1人暮らしをしており今まで近所の人と交流はありません。
1番最初に訪ねてこられた時にインターフォンで確認した際、終始不機嫌な様子で何度もチャイムを鳴らされ郵便受けを確認されました。
本来であればそこで玄関を開けて対応すれば良かったのですがマスクを付けていらっしゃらない事や、なによりも怖くて居留守をしてしまいました。
それから度々、多い日には1日に2回訪ねてこられる事があり自分の家なのに不安な気持ちです。
思い切ってインターフォン越しに対応するか、引っ越しをするしかないかなと思っています。
インターフォンで対応する際は画面を録画しようと考えています。
今まで一人暮らしをしてきてご近所トラブルを経験する事が無かったので正直とても怖いです。
何かアドバイスや経験談などありましたらご助言頂けると幸いです。