Преди 2 години Google своя нов алгоритъм за търсене BERT,

Преди 2 години Гугъл своя нов логаритъм за търсене BERT , който доста по-добре обработва поръчките на разнообразни езици. С помощта на модерна невронна мрежа логаритъмът проучва не обособените думи, а цели фрази и абзаци, което значително покачва съответността на резултата. Оказа се, че въз основата на BERT е допустимо да се сътвори извънредно ефикасна ИИ цензура, от което се възползваха китайските разработчици.

Китайският сегмент на Глобалната мрежа е мощно цензуриран. Сложността на китайския език и другите трикове, употребявани от потребителите, понижават успеваемостта на цензурата. Така да вземем за пример, благодарение на търсенето по основни думи се реализира успеваемост на цензурата най-много 70%. Ако се употребява подготвена от хора невронна мрежа, то успеваемостта на цензурата се приближава до 80%. Новият китайски логаритъм с детайли на изкуствен интелект, който се базира на BERT, даже и без образование покачва точността на подлежащите на цензура текстове до 91%.

Алгоритъмът Гугъл BERT е с отворен код, като интернет колосът го е лимитирал да не може да проучва текстове с дължина над 512 думи. За да се избегне това ограничаване китайските програмисти са собствен личен логаритъм за делене на огромните текстове на блокове, които могат да се проучват от BERT. След като тези блокове бъдат оценени, китайският логаритъм още веднъж съединява текста. Получило се е решение, което може да открива даже скритият сред редовете смисъл, който би трябвало да бъде.