Новости

Плановое обновление блэклистов. 

Количество записей в порн блэклисте - 3 122 964. Процент ошибок первого рода - 3.033%, второго рода - 1.121%. 

Внедрили механизм определения "мусорных" сайтов. К ним относятся запаркованные страницы, ошибки веб-серверов, сайты, находящиеся в разработке. При оценивании на принадлежность к категории "порнография" автоматика применяет более жесткие правила. Это уже позволило расширить блэклист на 389 тыс. сайтов.

Следующие две недели оцениваем эффективность решения и его влияние на состав блэклиста. 

 

Обновление блэклистов. Количество доменов в порно-блэклисте - 2 726 824. Процент ошибок первого рода - 2.956%, второго рода -  1.153%. 

Обновление блэклистов. Количество доменов в порно-блэклисте - 3 302 508. Процент ошибок первого рода - 2,319%, второго рода -  0,272%. 

Завершаем работы по оптимизации шаблонов для нейронной сети. Работы преимущественно связаны с изменением стандартов поискового движка Sphinx (переход от стемминга к лемматизации).

 

Обновление блэклистов. Количество доменов в порно-блэклисте - 3 322 412. Процент ошибок первого рода - 2,329%, второго рода -  0,261%. 

 

 

Обновление блэклистов. Количество доменов в порно-блэклисте - 3 234 206. Процент ошибок первого рода - 2,335%, второго рода -  0,278%. 

Продолжаем работу над анализом текстов. Параллельно начали эксперименты с анализом изображений.