Телеграм не узнает кто присоединился из ваших контактов, если не будет иметь доступ к вашим контактам. Отключил давно ему доступ, нет подобных уведомлений.