Конечно имеете. Но почитайте Устав ТСЖ. И смотря для каких целей они пришли. Если в аварийном случае, то вся ответственность за ущерб, причиненный другим лицам, в следствии такого не допуска в кв., ляжет на вас.