「猫を飼っていたのだろう?」と言っているのはどの立場の人ですか?
まず、猫の毛に関しては、実家や友人宅で飼われているから服についてきたもので、飼っていたという証拠にはならないと反論してみたらいかがですか?
ひっかき傷とされているものも1か所だけなら、おかしいです。猫は爪を研ぎますので1つの場所にいくつもの傷が付きます。指一本だけ爪を研ぐネコなどいません。
反論した上で、相手に猫を飼っていたとするなら客観的な証拠を出すよう求めてください。その上で、飼っていないものは飼っていないとキッパリとつたえることです。