Potíže se psem. Jak se můžu bránit?

Holky já jsem nešťastná, máme psa. Jako malé štěně ho někdo vyhodil v chatové oblasti, vedle které bydlíme. Ten pes se tam živil odpadky a kočičími granulemi, které tam leží snad u každé chaty. Podotýkám na neoploceném území, kde ani není jasné kde začíná a končí, navazuje na les.
Psa jsme se ujali, vyléčili, vykastrovali, je cvičený, socializovaný, inteligentní. Většinu dne je s námi buď doma nebo na zahradě nebo na procházce. Už takto fungujeme dva roky, se sousedy v blízkém okolí není problém, pomazlí se, pozdraví se nikomu neublizuje ani on ani my. Nicméně teď po dvou letech se ve zmíněné chatové oblasti zjevili noví majitelé.
Zatím jsem je viděla pouze dvakrát. Poprvé měli velký problém s tím, že psa vencime v okolí na volno, aniž by jim cokoliv udělal tvrdili cosi o napadení a pan vyhrožoval, že mu ublíží. Pořídí si nůž či jinou zbraň a pod. Podruhé jsem je viděla nedávno, kdy bohužel chybou nasi psisko vyrazilo na obchuzku zkontrolovat misky. To přišli s holí až k nám a vyhrožoval peprakem. Vím, že je hloupé, že ten pes občas zajde za svým lákadlem, ale proboha mám si i přes omluvy nechat líbit výhrůžky a osocovani z nepravd? Jak se můžu bránit? Mě totiž přijde že pan si vylze cokoliv si zamane a my už se bojíme chodit se psem ven...