Как автоматизировать модерацию комментариев?

[azsx]

Я очень люблю Россию, но из-за законов, которые принимают наши депутаты мне надо модерировать комментарии. 63 страницы в word 11 шрифтом.
Если у вас есть свободная минутка, напишите, пожалуйста, как бы вы реализовали решение такой задачи.
Модерирования большого потока комментариев, как можно более упрощённо для человека.
зы
нанять работника не предлагать, я сам!

[vitaly_l]

из-за законов, которые принимают наши депутаты мне надо модерировать комментарии. 63 страницы

Это что за закон?

Добавлено спустя 1 минуту 9 секунд:
А вообще по ключевым словам. Если есть то читаешь, если нет, то можно забить.

[azsx]

Если есть то читаешь, если нет, то можно забить.

Получается, что список таких слов можно составить только постоянно читая комменты. Например, траввва закладка (номер телефона цифрами) -- это абуза от роснарконадзора. И так далее, надзоров немеряно...
Также маты, экстремизм, персональные данные -- это то, что надо не пропускать по стоп словам совсем (даже не читая).
Что ещё кроме стоп слов?

Это что за закон?

Это будет оффтопик

[vitaly_l]

Это что за закон?
Это будет оффтопик

Ну напишите в личку, раз так боитесь испортить идею топика.

Кстати, если не ключевые слова, то дальше только ИИ (точнее его самообучаемая эмуляция). Но на обучение тоже нужно время.

[azsx]

ИИ не потяну. Ключевые слова идея хорошая, только проблематична в реализации.

[olegy123]

Добавлено спустя 5 минут 38 секунд:
А.. понял , наоборот.. вы по другую сторону
есть spamassassin
его кормите правильными сообщениями и не правильными, есть blacklist слов(можно этим словам вес дать), возможно прикрепить regex анализ - в итоге на каждое сообщение получаете вес..
так побеждают спам..

[azsx]

есть spamassassin

реально думаете поможет?
У меня http комментарии, ну просто...

[serbod]

Проще вывести сайт из юрисдикции РФ. Можно не весь, просмотр и написание комментариев вынести на отдельный хост.

[vitaly_l]

Проще вывести сайт из юрисдикции РФ. Можно не весь, просмотр и написание комментариев вынести на отдельный хост.

О кстати, действительно, все комментарии, можно оформить с помощью API: VK, OK или FB - тогда все комментарии будут храниться на их сервере, и у вас туда вообще не будет доступа. соответственно, и отвечать за мат на сайте по идее должны они, т.к. вы не сможете редактировать БД на их сервере.

[azsx]

Оба варианта не подходят, но я рад любым идеям.

[Лекс Айрин]

А если использовать блеклист и премодерацию попадающих под него комментариев? Имхо, это, заодно, и приведет к более вдумчив комментам (попал под раздачу -- будешь писать более аккуратно). При том, что не думаю, что от тебя требуют моментальной реакции на ненормативную лексику. Конечно, все равно придется просматривать и остальное, но уже чуть менее внимательно.

[Mirage]

Модерировать на предмет чего? Что должен делать алгоритм?
Банить по списку стоп-слов? Банить за негативный контент? Банить за контент, имеющий признаки экстремизма? Пробивать по базе законов и банить все незаконное?

[olegy123]

реально думаете поможет?

есть
Text::SpamAssassin - defender of blogs, wikis, and message boards
http://search.cpan.org/~robn/Text-SpamA ... ssassin.pm

Код: Выделить всё

    use Text::SpamAssassin;

    my $sa = Text::SpamAssassin->new(
        sa_options => {
            userprefs_filename => 'comment_spam_prefs.cf',
        },
    );

    $sa->set_text($content);

    my $result = $sa->analyze;
    print "result: $result->{verdict}\n";

Автоматизирует.
Но если хотите на 100% обезопасить - то лучше ручная модерация сообщений.

[azsx]

Лекс Айрон, спасибо, использую блеклист.
olegy123, спасибо, попробую через неделю.
Mirage, я хочу иметь возможность не читать комментарии, совсем. При этом быть уверенным, что комментарии не нарушают законодательство РФ, чтобы получить бан ip по абузе ли штраф с визитами в прокуратуру. Как не основное, всякие вредные для seo и здравого смысла тексты блокировать. Что я спрашиваю, я ищу какой-то алгоритм (методику проверки, идею) кроме списка стоп слов. Вот идея, пользоваться сторонним сервисом. Как накидают идей -- так улучшу свой алгоритм.
У меня сейчас:
1. блокируются комментарии, который имеют в теле урл.
2. список стоп слов (фраз): маты, адулт, фарма, политика и пополняю иногда. Но, например, ставлю в бан xrumer, то есть коммент с этим словом должен блокироваться. А если кто то пишет как от хрумера избавиться? Далее, большая часть комментариев с упоминанием Украины -- это жёсткая политика, на грани экстремизма. Но нельзя же блокировать слово Украина. Думал, блокировать по двум словам, которые встречаются одновременно, но это значительно увеличит размер базы. Сейчас база измеряется тысячами слов. Так как сегодня мой алгоритм по сути завязан на стоп словах -- мне постоянно приходится читать комменты и добавлять новые стоп слова.
3. В некоторых сайтах в комментариях блокируются контакты.
Пока не знаю блокировать ли комментарии на чужом для сайта языке, но это технический вопрос.
зы
на моих комментариях нет ни регистрации, ни премодерации, ни капчи. Поэтому спама особенно много.

[ev]

если я правильно помню законодательство, то просто так " бан ip по абузе ли штраф с визитами в прокуратуру" не получить
если хостер не тормоз, то сначала будет предупреждение/запрос на удаление материала

на моих комментариях нет ни регистрации, ни премодерации, ни капчи

почему? ведь это ощутимо снизит поток спама