Поисковый алгоритм Google стал основой для ИИ-цензора в Китае

Новый поисковый алгоритм Google представила два года назад. Он получил название BERT и стал индексировать не только слова, но и предложения. На основе этого алгоритма китайские цензоры создали ИИ.

Новый поисковый алгоритм Google представила два года назад. Он получил название BERT и стал индексировать не только слова, но и предложения. На основе этого алгоритма китайские цензоры создали ИИ, сообщает МедиаПоток.

Китайские цензоры уже долгое время серьезно ограничивают свободу слова в китайском сегменте. Для этого они используют поиск по ключевым словам, но он эффективен всего лишь на 70% из-за сложности языка. При этом алгоритмы повышают эффективность до 80%.

Оказалось, что поисковый алгоритм BERT повышает качество поисковой выдачи до 91%. При этом он мог обрабатывать только тексты до 512 символов длиной.

Тогда китайские разработчики улучшили алгоритм и научили его разбивать длинные тексты на короткие.

Улучшением поискового алгоритма занимались разработчики из Шэньянского университета Лигун и Китайской академии наук.

Ранее МедиаПоток сообщал, что Китай планирует сотрудничать с учеными со всего мира в сфере исследования Луны.

Источник 3D News