Китайские разработчики создали ИИ-цензор для поиска «запрещённой» информации на основе алгоритма Google Статьи редакции
Он может находить данные с точностью в 91% и пригодится для цензуры интернет-изданий, заявляют исследователи.
- Разработчики из Шэньянского университета Лигун и Китайской академии наук создали технологию с элементами ИИ на основе алгоритма BERT от Google, который может фильтровать «вредную информацию» в интернете с высокой точностью, пишет South China Morning Post.
- Он позволяет находить подлежащие цензуре тексты с точностью в 91%, утверждают исследователи. При этом, например, поиск по ключевым словам даёт точность в 70%, а у обученной людьми нейросети — 80%.
- Алгоритм Google BERT с открытым кодом не может анализировать тексты длиной более 512 слов, поэтому разработчики создали алгоритм, который разбивает длинный текст на сегменты, доступные для анализа, а затем собирает текст обратно.
- Как утверждают исследователи, решение содержит словарь с ключевыми словами и их формами. Также алгоритм может искать скрытый между строк подтекст, так как пользователи в Китае используют омонимы или добавляют дефисы между символами, чтобы избежать цензуры.
- Интернет в Китае жестко контролируют, многие сайты, в том числе Google, Facebook, Twitter заблокированы, а часть контента на доступных сайтах запрещена. При этом китайский язык слишком сложный, чтобы использовать обычные решения для поиска «запрещенной» информации, отмечает издание.
- Решение было бы полезно, чтобы «найти и отфильтровать информацию из интернет-изданий», заявили ведущий исследователь Ли Шу и её коллеги. Сейчас китайское правительство и компании полагаются на «армию цензоров», которые вручную проверяют контент в интернете, но это слишком дорого и неэффективно, пишет издание.
0
показов
3.8K
открытий
1
репост
Тексты уходят в прошлое, теперь эра аудио и видео, китайская цензура обречена на пробуксовку.
Как рухнул СССР, так и рухнет КНР, на лжи и лицемерии (коммунистическая партия Китая состоит сплошь из миллиардеров и миллионеров ) ничего долговечного не построить.
Комментарий недоступен
То, что это не правда, экономика стагнирует, рост исключительно за счет мега-проектов, соц. защиты нет, от того такие вложения в цензуру, несколько миллионов людей этим в Китае занимаются.
Но хуже то, что когда он начнет падать, то упадет на нас.
Комментарий недоступен
В Китае нет соц. защиты для 80% населения так точно.
Поскольку капитализм в нынешней форме себя изжил.Мега проекты в которых нет смысла разорили не одну страну, разорят и Китай.
В Китае построили самую жесткую форму капитализма из всех что бывает, от того такая цензура, чтобы впаривать фуфло про светлое коммунистическое будущее.
Комментарий недоступен
Китайское правительство врет стрикороба по всем вопросам, для этого достаточно туда съездить хоть раз.
могут спокойно переехать в другую страну с любым строем. Никто не держит.Меня бы Китай никак не трогал, если бы правящая элита РФ не показывала на него пальцем как на успешный пример, которому нужно подражать.
Если китайцы очень довольны, для чего тогда армия цензоров в несколько миллионов человек?
В Китае для выезда нужно разрешение.
Комментарий недоступен
Например про коронавирус месяц врали и скрывали от мира
Комментарий недоступен
Из лаборатории китайской утёк
Комментарий недоступен