Китайские разработчики создали ИИ-цензор для поиска «запрещённой» информации на основе алгоритма Google Статьи редакции
Он может находить данные с точностью в 91% и пригодится для цензуры интернет-изданий, заявляют исследователи.
- Разработчики из Шэньянского университета Лигун и Китайской академии наук создали технологию с элементами ИИ на основе алгоритма BERT от Google, который может фильтровать «вредную информацию» в интернете с высокой точностью, пишет South China Morning Post.
- Он позволяет находить подлежащие цензуре тексты с точностью в 91%, утверждают исследователи. При этом, например, поиск по ключевым словам даёт точность в 70%, а у обученной людьми нейросети — 80%.
- Алгоритм Google BERT с открытым кодом не может анализировать тексты длиной более 512 слов, поэтому разработчики создали алгоритм, который разбивает длинный текст на сегменты, доступные для анализа, а затем собирает текст обратно.
- Как утверждают исследователи, решение содержит словарь с ключевыми словами и их формами. Также алгоритм может искать скрытый между строк подтекст, так как пользователи в Китае используют омонимы или добавляют дефисы между символами, чтобы избежать цензуры.
- Интернет в Китае жестко контролируют, многие сайты, в том числе Google, Facebook, Twitter заблокированы, а часть контента на доступных сайтах запрещена. При этом китайский язык слишком сложный, чтобы использовать обычные решения для поиска «запрещенной» информации, отмечает издание.
- Решение было бы полезно, чтобы «найти и отфильтровать информацию из интернет-изданий», заявили ведущий исследователь Ли Шу и её коллеги. Сейчас китайское правительство и компании полагаются на «армию цензоров», которые вручную проверяют контент в интернете, но это слишком дорого и неэффективно, пишет издание.
0
показов
3.8K
открытий
1
репост
Тексты уходят в прошлое, теперь эра аудио и видео, китайская цензура обречена на пробуксовку.
Как рухнул СССР, так и рухнет КНР, на лжи и лицемерии (коммунистическая партия Китая состоит сплошь из миллиардеров и миллионеров ) ничего долговечного не построить.
Кто работать тогда будет, если Китай рухнет? Пусть лучше они там своих граждан цензурируют, лишь бы работали
Еще лучше работать будут, так как переснут херней страдать типа строительство дорог в никуда, вместо морских перевозок.
Общая эффективность осколков Китай будет даже больше, с СССР тоже самое получилось. Это как со Standart Oil, когда осколки монополии показали совокупно большую прибыль.
Зачем им работать, если будет свобода? Будут как американцы всякой ерундой заниматься. Американец на рынке стоит намного дороже китайца, не выгодно
Вы это серьезно насчет американцев? Не видел более трудолюбивой нации, трудовые маньяки какие-то.
Ну можно тогда амеркианцев окитаить, пусть вкалывают за плошку риса, раз трудолюбивая нация, я не против. Я говорю о том, что сами американцы не спешат проявлять свою трудолюбие в кузнечном цеху по технологиям начала 20 века, да даже на конвейерах у них черные работали все время, у Хайли в Колесах описано кто трудился в США. Трудолюбиво перекладывать бумажки это одно, а создавать продукт другое
У вас странные представления об экономике, индусы вкалывают за плошку риса, африканцы, дальше что?
Пусть кто угодно вкалывает, кто-то же должен работать, у меня российский паспорт, мне ни американцев, ни китайцев, ни индусов, ни африканцев не жаль. У меня идеальная картина мира где Россия эксплуатирует весь мир, любую российскую экспансию я поддерживаю
вангую десятка два минусов на ваш циничный комментарий от розовоочечных идеалистов у которых важна слезинка африканского ребенка и в целом в мире дружба-жвачка межгосударственная давно :)