{"id":14273,"url":"\/distributions\/14273\/click?bit=1&hash=820b8263d671ab6655e501acd951cbc8b9f5e0cc8bbf6a21ebfe51432dc9b2de","title":"\u0416\u0438\u0437\u043d\u044c \u043f\u043e \u043f\u043e\u0434\u043f\u0438\u0441\u043a\u0435 \u2014 \u043e\u0441\u043d\u043e\u0432\u043d\u044b\u0435 \u0442\u0440\u0435\u043d\u0434\u044b \u0440\u044b\u043d\u043a\u0430 \u043d\u0435\u0434\u0432\u0438\u0436\u0438\u043c\u043e\u0441\u0442\u0438","buttonText":"","imageUuid":""}

Apple усилит защиту детей — начнёт размывать откровенные снимки в «Сообщениях», проверять iCloud и предупреждать в Siri Статьи редакции

Компания будет проверять контент прямо на устройствах с помощью нейросетей, натренированных на распознавание сексуальных снимков.

Apple объявила о расширении функций для защиты детей на всех своих операционных системах — iOS, iPadOS, macOS и watchOS. Компания начнёт размывать откровенные снимки в «Сообщениях», предупреждать родителей о получении и отправке сексуальных фотографий, сканировать контент в iCloud и добавит руководства для безопасности в Siri.

Компания пояснила, что хочет защитить детей от «хищников, которые используют средства коммуникации для привлечения и эксплуатации». Для этого Apple внедряет новые опции в трёх областях: «Сообщениях», iCloud, а также в Siri — возможности разработали совместно с экспертами по детской безопасности.

Размытие откровенных снимков и предупреждение родителей в «Сообщениях»

С выходом iOS и iPadOS 15, watchOS 8, macOS Monterey приложение «Сообщений» начнёт использовать машинное обучение на каждом конкретном устройстве для распознавания откровенного контента. Алгоритмы будут локально сканировать фотографии, но сама Apple не получит доступ к данным — всё будет происходить на устройствах.

Изображение Apple

В случае получения откровенного контента «Сообщения» автоматически размоют снимок, а также расскажут детям о том, что они могут не смотреть подобные фотографии. Дети также не смогут отправить сексуальные фото — их предупредят, а родителям сообщат, если снимок всё же отправят или посмотрят.

Распознавание фото в iCloud и передача полиции данных о сексуальном насилии над детьми

Новые iOS и iPadOS также начнут бороться с распространением контента с сексуальным насилием над детьми (Child Sexual Abuse Material, CSAM). Apple будет распознавать откровенные фотографии в iCloud и передавать данные властям. В США технология позволит компании отчитываться об опасных случаях в Национальный центр пропавших и эксплуатируемых детей (NCMEC). Организация будет работать сообща с местными властями в разных штатах.

Сканирование снимков в iCloud также будет происходить приватно: для этого Apple будет использовать машинное обучение на устройствах. Нейросети начнут сопоставлять изображения из облачных хранилищ с хешами изображений, предоставленных NCMEC и другими организациями по детской безопасности. В Apple утверждают, что эта база данных будет нечитаемым набором хешей, которые безопасно хранятся на устройствах.

Проверку на сексуальное насилие над детьми будут проводить до выгрузки фотографии в само облако iCloud. Сравнение работает на криптографической технологии «пересечения приватных наборов» — она проводит сравнение, не выдавая результат. Устройство будет создавать безопасный криптографический ваучер, который расшифровывает результаты сравнения вместе с дополнительными данными о фотографии. Затем ваучер будут выгружать в iCloud вместе с изображением.

Apple также будет применять технологию «разделения секрета», которая позволит обезопасить ваучеры безопасности от расшифровки на стороне сервера до тех пор, пока пользователь не пересёк правила безопасности. В компании утверждают, что это гарантирует высокий уровень точности — система будет выдавать меньше одного из триллиона ложных результатов за год.

Только в случае фиксации нарушений сразу двумя технологиями Apple сможет интерпретировать контент ваучеров безопасности и сравнить изображения самостоятельно. Затем компания обещает вручную изучать каждый случай, чтобы подтвердить соответствие, отключит аккаунт пользователя и сообщит о нём в NCMEC. Пользователи смогут оспорить жалобу, если считают её ошибочной.

Новые руководства безопасности в Siri и подсказки в «Поиске»

Apple также начнёт лучше предупреждать и обучать юных пользователей систем и их родителей о том, как лучше вести себя в небезопасных ситуациях. Siri и «Поиск» вмешаются, когда пользователи попытаются найти связанные с CSAM данные — система объяснит, что это проблемные и болезненные темы и предложит почитать о них подробнее.

Siri также начнёт предлагать дополнительную информацию детям и родителям о том, как реагировать на эксплуатацию детей и сексуальное насилие. Например, если пользователи спросят голосового ассистента, как сообщить о CSAM, то их направят на соответствующие ресурсы.

В Apple обещают со временем расширять ресурсы для защиты детей. Новые функции станут доступны с выходом новых версий систем осенью 2021 года. Компания также предоставила дополнительную информацию о нововведениях в подробной документации, включая выжимку об использовании технологий, протоколы безопасности, и независимые технические консультации экспертов.

0
150 комментариев
Написать комментарий...
Джеймс Бонд

иногда мне кажется что на VC сидят совсем глупые люди. Среднего ума педофил никогда не будет заморачиваться и прослеживать каждую новость, он просто пойдет делать свое дело. Поэтому это будет работать, особенно через пару лет, когда шум уляжет. 

Многим нравится быть в безопасности, не видеть террористов, не слышать взрывов, все хотят точно знать что их ребенок точно доберется до школы и обратно живым, но как только речь заходит о том, что сами люди с помощью своих гаджетов, или с помощью государственной инфраструктуры должны делиться данными, так у многих подгорает.

Вы можете себе представить как работает службы специального назначения? На какие жертвы они идут чтобы пресечь очередной подрыв? А знаете как находят педофилов сейчас?
Вы действительно считаете что розовый слоник каждый день шепчет на ушко специальным службам о готовящемся теракте или о случаях педофилии?

Лишний раз убеждаюсь что демократии и право голоса среди низших слоев населения быть не должно, и на самом деле замечательно что ее нет нигде. А вот ширму демократии поддерживать нужно, ибо низшему слою населения никогда не удастся обьяснить почему их голос - мусор. 

Лучший аргумент против демократии — пятиминутная беседа со средним избирателем - Черчилль.

Ответить
Развернуть ветку
K. A.

Проблемы 2:

1. РКН тоже начинался с защиты детей, а теперь блокирует СМИ, «политически неблагонадежных» и просто неугодных.

2. Никто не защитит от false positives, хакерских атак, внутренней коррупции. По сути, это бекдор в end-to-end зашифрованные сообщения.

iPhone всегда был про privacy и «ты можешь доверять своему устройству». Если эта идея взлетит, это будет уже не так.

А в случае конкретно с отправкой уведомлений о надсад родителям Apple и вовсе берет на себя роль морализатора, которая от них никому не нужна. Дети обмениваются нюдсами. Это нормально. Они тоже имеют право на свою privacy.

Ответить
Развернуть ветку
Алексей Штейн

Что плохого в блокировке иногентов и террористов в виде фбк ?

Ответить
Развернуть ветку
lakoros

это уже тролинг.

Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Make Luv

Животное.

Ответить
Развернуть ветку
Gre Li

Поймёте, когда окажетесь в списке террористов после прогулки в центре города.

Ответить
Развернуть ветку
Филипп Дмитров

Отвечая на первое — Эппл за подобным замечен пока не был.
Отвечая на второе — прочтите внимательно про механизм шифрования с поиском набора. На сервере невозможно будет восстановить по хэшу примерно ничего.

Ответить
Развернуть ветку
K. A.

По поводу первого, РКН начинался с малого. Вы думаете, когда Apple запустит эту технологию, у самых разных правительств не будет желания «расширить» ее применение?

Национальным законам Apple обычно подчиняется, если имеет техническую возможность. Данные они хранят локально в России и в Китае, предустановку приложений тоже добавили.

Организовать обнаружение «экстремистов» техническая возможность теперь у них тоже будет.

По поводу второго, вы издеваетесь? Вы читали первоисточник?

Only when the threshold is exceeded does the cryptographic technology allow Apple to interpret the contents of the safety vouchers associated with the matching CSAM images. Apple then manually reviews each report to confirm there is a match, disables the user’s account, and sends a report to NCMEC
Ответить
Развернуть ветку
Евгений Трифонов
 Организовать обнаружение техническая возможность теперь у них тоже будет

А раньше у них её не было? Насколько понимаю, приложение «Фото» давно отличает котов от собак, то есть сам айфон давно смотрит, что на фото пользователя. Дальше оставалось только верить на слово Apple, что он эти данные никуда не передаёт.

Теперь Apple говорит «передавать данные будем, но только когда речь об очевидном зле». Нам остаётся верить на слово Apple, что действительно «только».

Вопрос: что с точки зрения технических возможностей сейчас изменилось?

Ответить
Развернуть ветку
K. A.

Отличает котов от собак != передает эту информацию куда-то. На обманах такого рода Apple ранее не попадалась. Вот и здесь честно заявляют: теперь будем делать скрининг вашего контента.

Ответить
Развернуть ветку
Евгений Трифонов

Спасибо, мысль понял, отчасти согласен. Но про «бекдор в end-to-end зашифрованные сообщения» — в iCloud же вроде никакого e2e никогда не было? И если «никто не защитит от внутренней коррупции», как тогда быть уверенным (даже если ты Тим Кук), что внутренняя коррупция не добралась до твоих незашифрованных фото в iCloud уже давно?

Ответить
Развернуть ветку
K. A.
 Но про «бекдор в end-to-end зашифрованные сообщения» — в iCloud же вроде никакого e2e никогда не было?

Во-первых, частично есть - там же хранятся зашифрованные сообщения iMessage.

Во-вторых, дело как раз в том, что здесь Apple начинает делать on-device matching - это позволяет работать с данными еще до того, как они были зашифрованы и переданы наружу. На самом устройстве данные доступны без проблем - вы же видите и фото, и сообщения в iMessage.

End-to-end encryption защищает от MitM, в том числе, от поставщика сервиса (Apple, WhatsApp), но не защищает от "трояна" на самом устройстве. Вот Apple здесь прецедент такого трояна делает.

Ничто здесь не помешает делать матчинг сообщений относительно паттерна общения террористов (например) или проверять фото на предмет запрещенных предметов / людей / литературы.

Даже если этого сейчас нет, завтра придет Китай и скажет: хочу получать алерты, если пользователи обсуждают Тяньаньмэнь, потом Россия придет за "иноагентами", которые обсуждают условного Навального.

Потом вспомнят о праве на забвение и скажут: а пусть Apple удаляет с устройств всю информацию, где упоминается условный Медведев.

И Apple не смогут ответить - это беспрецедентно, мол, у нас нет технической возможности, мы так не делаем. Для США делали же предедент с CP, значит и прецедентно, и технически возможно, и вашим ценностям соответствует. А у нас в стране свое законодательство и свои приоритеты - теперь для нас будете делать. Это "наш CP".

 И если «никто не защитит от внутренней коррупции», как тогда быть уверенным (даже если ты Тим Кук), что внутренняя коррупция не добралась до твоих незашифрованных фото в iCloud уже давно?

Риск есть всегда, но чем больше преград, тем он ниже. Сейчас, чтобы добраться до фото в iCloud, которые хранятся в зашифрованном виде, нужно преодолеть целый ряд препядствий и людей, а с этой функцией - достаточно работать с двумя командами: те, кто делают алгоритмы матчинга и те, кто делают верификацию при срабатывании триггера.

Ответить
Развернуть ветку
Евгений Трифонов
 Ничто здесь не помешает делать матчинг сообщений относительно паттерна общения террористов (например) или проверять фото на предмет запрещенных предметов / людей / литературы.

Насколько понимаю, Apple утверждает, что сверяет фото по хэшам с базой данных. Для «проверки на запрещенных людей» хэшей будет недостаточно, это надо менять весь принцип работы. Может ли внутренняя коррупция вносить настолько масштабные изменения и при этом оставаться незамеченной?

Ответить
Развернуть ветку
K. A.
 Насколько понимаю, Apple утверждает, что сверяет фото по хэшам с базой данных.

1. Посмотрите их White Paper — там soft matching, не обязательно совпадение 1:1

2. Следующим шагом будет движение со стороны России, Китая и пр. по внедрению еще более гибкого метчинга. Логичная идея — face matching против лиц террористов и иностранных агентов.

Ответить
Развернуть ветку
Rodeus

Правительства не интересуются котами и собаками, поэтому и не попадались.

Ответить
Развернуть ветку
K. A.

Ну на каких privacy-скандалах, где Apple обманывали, они попадались?

Вот и здесь - им ничто не мешало бы сделать это "под ковром", тем более, что для пользователя эта система прозрачна. Но они честно сказали: мы залезем на ваш телефон и прошерстим ваши фото, ня! ^^

Ответить
Развернуть ветку
Евгений Трифонов

Ну как сказать «им ничто не мешало». Если эта система нужна, чтобы сдавать педофилов полиции, то когда полиция пришла бы за первым, он спросил бы «какие ваши доказательства» и всё вскрылось бы. То есть в stealth-режиме такая система существовать просто не может.

Ответить
Развернуть ветку
Rodeus

Если не попадалась, не означает, что компания не обманывала.
Как можно сделать цензуру под ковром, если всплывает сам факт цензуры? Конечно сказали. А то, что можно сделать под ковром, они сделают, если их к этому склонят. И скорее всего сделали.

Ответить
Развернуть ветку
K. A.

Невозможно не доверять никому и ни в чем. Даже Open Source, если вы лично его не писали, вы не знаете, кто писал и аудировал, насколько они были компетентны и в чем были их интересы.

Исходя из прошлых действий Apple и их позиционирования мое ограниченное доверие они заслужили.

Ответить
Развернуть ветку
Rodeus

Ваше, но не общее доверие

Ответить
Развернуть ветку
K. A.

I personally couldn’t care less about общее доверие. 

Ответить
Развернуть ветку
Rodeus

Это не имеет значения. Все, что ты написал, справедливо только персонально для тебя, а не является фактом. Ты доверяешь? Твои проблемы.

Ответить
Развернуть ветку
K. A.

Как я сказал, couldn’t care less. Рептилоиды, заговор фармацевтов и прочий треш, основанный не на объективных верифицируемых аргументах, а на «от нас скрывают» мне не интересен.

Ответить
Развернуть ветку
Rodeus

А, ну так конечно. Все кругом белые и пушистые.

Ответить
Развернуть ветку
K. A.

Да нет, вокруг одни заговоры, за вами следят и контролируют через чип в вакцине и 5G, внедренные под видом фальшивой COVID-эпидемии, инспирированной мировой закулисой. Плюс ГМО-еда, чтобы изменить генотип в тип подчинения (кстати, а Спутник внедряет ДНК в ядра клеток, если что) и ИТ-компании, которые соревнуются в том, как вас подставить, чтобы повысить степень контроля.

Вот я написал это сообщение, и сразу Интернет выключился. Это VC продал доступ к тексту перед отправкой Apple, те передали его моему телекому, где СОРМ связался с ИИ от закулисы, и те попытались замолчать правду.

Ответить
Развернуть ветку
Rodeus

За мной не следят, а тебе бы врачу показаться.

Ответить
Развернуть ветку
K. A.

А как же злые ИТ-компании, которые под ковром делятся данными с фото с мировыми правительствами? :(

Ответить
Развернуть ветку
Rodeus

Делятся или нет, ты на это никак и никогда не повлияешь. И скорее всего не узнаешь, пока не появится очередной Сноуден.

Ответить
Развернуть ветку
K. A.

...и это ничем не отличается от заговора фармацевтов, мирового правительства, кольца врагов вокруг России и пр. Такой чайник Рассела.

Одна из теорий заговора когда-нибудь даже может попасть в точку и подтвердиться!

Ответить
Развернуть ветку
Rodeus

С таким же успехом можно говорить про теории отсутствия заговоров, только потому, что ты кому-то там доверяешь. Гипотечески возможно что угодно. Вопрос в том, насколько ты веришь в какие-то крайности. Или все данные сливаются мировым фармацевтам или все ойтишники белые и пушистые, хранят наши данные под  подушкой под присмотром своего чихуа-хуа, и никто на них не собирается посягать. Ты выбрал второе относительно Apple, а истина где-то посередине.

Ответить
Развернуть ветку
K. A.

Поэтому в науке есть принцип фальсифицируемости и нулевая гипотезы, которые в сумме делают "теорию отсутствия заговоров" теорией "по умолчанию", пока не доказано обратного.

Я выбрал доверять компаниям, которые вели себя достойно до той поры, пока не появится значимой информации, которая на основе фактов подвергает это сомнению — той же Apple, которая относительно условных Google или Huawei сморится намного лучше.

Ваш подход как раз черно-белый — помазать всех черной краской и сказать, что вокруг заговор, и все ИТ-компании сливают ваши данные и обеспечивают слежку.

Ответить
Развернуть ветку
Rodeus

Читай внимательно, я обозначил свой подход. Я не верю в теории заговоров, тем более он тут неприменим. Речь о компании-гиганте, которая управляет личными данными немалой доли населения планеты и регулярно иницирует новые подходы к анализу таких данных. И интерес к этим данным у правительств и силовиков есть. А, как известно, у государства всегда на один патрон больше, каким бы крупным бизнесом ты не был. Ты — технологический гигант и инноватор и хочешь вести бизнес и дальше? Тогда помогай государству решать важные проблемы. Или не очень важные, или какие попросим. Поэтому слепо доверять компании, которая знает о пользователях слишком много, вплоть до биометрии и цвета пуха на лобке, это как минимум не слишком разумно. Это и есть мой подход. А ты видишь только черное и белое. И выбрав для себя белое, автоматом мне приписываешь почему-то черное.

Ответить
Развернуть ветку
K. A.
 Я не верю в теории заговоров
 Речь о компании-гиганте, которая управляет личными данными немалой доли населения планеты и регулярно иницирует новые подходы к анализу таких данных. И интерес к этим данным у правительств и силовиков есть. А, как известно, у государства всегда на один патрон больше, каким бы крупным бизнесом ты не был. Ты — технологический гигант и инноватор и хочешь вести бизнес и дальше? Тогда помогай государству решать важные проблемы.

Да-да-да. Речь о фарма-гигантах, которые управляют созданием лекарств и вакцин для немалой доли населения планеты и регулярно инициируют поиск новых источников заработка. И интерес к повальному распространению псевдо-вакцин, которые будут убивать иммунитет и стимулировать покупать больше медикаментов, у олигархических владельцев этих компаний есть. А, как известно, у олигархов все куплено, какой бы крупной страной ты не был. Ты - продажный чиновник и хочешь оставаться на свободе и вести свой бизнес и дальше? Тогда помогай олигархам распространять ковид-панику  и продавать вакцины.

 Поэтому слепо доверять компании, которая знает о пользователях слишком много, вплоть до биометрии и цвета пуха на лобке, это как минимум не слишком разумно. Это и есть мой подход.

Поэтому слепо доверять фарм-кампаниям, которые вводят в твой организм неизвестные вещества, вплоть до вакцин, меняющих ДНК твоих клеток, не слишком разумно. Это и есть мой подход.

Ответить
Развернуть ветку
Rodeus

Не устал дичь нести?

Ответить
Развернуть ветку
K. A.

В точности повторил вашу логику, только заменил "ИТ-компании" на "фарм-гиганты", "слежку" на "COVID", а "правительство" на "олигархат".

Сорри, если ваша логика - дичь, тут я ничего не могу поделать. :(

Ответить
Развернуть ветку
J S
Если эта идея взлетит

Они уже это сделали в iOS 15
Через месяц она официально у всех будет.

Ответить
Развернуть ветку
K. A.

До релиза еще месяц. Вкладки в Safari на Mac они вернули старые, могут и здесь пойти на попятную.

Ответить
Развернуть ветку
J S

Могут убрать что видно, замыливание например, а сканирование оставить. Никто же не проверит, что у них там внутри.

Ответить
Развернуть ветку
K. A.

Ну, Apple еще не попадались на том, что врали, что у них внутри. И у них cornerstone их ценности - доверие и приватность. Высокие риски для бизнеса, если оставят "тайком", а потом это вскроется.

Ответить
Развернуть ветку
J S

Про замедление они не говорили.

Ответить
Развернуть ветку
K. A.

https://support.apple.com/en-us/HT208011

iOS 10.2.1 includes bug fixes and improves the security of your iPhone or iPad.
It also improves power management during peak workloads to avoid unexpected shutdowns on iPhone.

Криво, но говорили. Ну и ни разу не говорили противоположного.

Ответить
Развернуть ветку
Rodeus

Т.е. то, что Apple собрал базу отпечатков пальцев и 3D-слепков лица это еще privacy, а анализ алгоритмами фото в переписках уже нет?

Ответить
Развернуть ветку
147 комментариев
Раскрывать всегда