87 ответов в этой теме

[Aleksandra]

2Konstantin Yudin Файлы и лог у вас на ftp.

[Konstantin Yudin]

с не дефолтным параметром 1 могут быть различные аномалии и падения при проверке определенного контента.

Есть подозрение, что дефолт у DRW_MAX_FORKS_PER_FILE – 0. Могу предположить, что это выставляет параметр по числу логических процессоров.

не в 11.0.3

[Afalin]

с не дефолтным параметром 1 могут быть различные аномалии и падения при проверке определенного контента.

Есть подозрение, что дефолт у DRW_MAX_FORKS_PER_FILE – 0. Могу предположить, что это выставляет параметр по числу логических процессоров.

не в 11.0.3

Что в 11.0, что в master – вижу default_value(0).

[Boris Savelev]

думаю вы путаете

 ScanEngine.MaxForks = 4
ScanEngine.MaxForksPerFile = 1

 

MaxForks выставляется по кол-ву ядер

[Konstantin Yudin]

с не дефолтным параметром 1 могут быть различные аномалии и падения при проверке определенного контента.

Есть подозрение, что дефолт у DRW_MAX_FORKS_PER_FILE – 0. Могу предположить, что это выставляет параметр по числу логических процессоров.

не в 11.0.3

Что в 11.0, что в master – вижу default_value(0).

https://bugs.drweb.com/view.php?id=131027

[Afalin]

Ок.

[Aleksandra]

думаю вы путаете
 ScanEngine.MaxForks = 4
ScanEngine.MaxForksPerFile = 1
 
MaxForks выставляется по кол-ву ядер

Выставила так:

[root@localhost aleksa]# drweb-ctl cfshow ScanEngine.MaxForks
ScanEngine.MaxForks = 2
[root@localhost aleksa]# drweb-ctl cfshow ScanEngine.MaxForksPerFile
ScanEngine.MaxForksPerFile = 1

Было 4 и 2, соответственно.

Увеличила ulimit -n 4096, было 1024.

Это почему-то дало обратный эффект, стало еще больше boost::filesystem::unique_path: Too many open files. В итоге сканер опять завис на каком-то файле.

[Aleksandra]

>Как понимать Engine crash detected и Engine hang-up detected это вроде как ненормально?

буквально понимать. нужны файлы на которых такое происходит. это 99.9% движок.

Спасибо, эта проблема закрыта.

[Dmitry Volkov]

Приветствую.

 

Выложили дистрибутивы с новыми исправлениями и обновили репозиторий.

 

Изменения:

- Исправлена проблема с "Too many open files" при проверке / через команду drweb-ctl netscan

- Несколько минорных исправлений в модулях ctl.

[Aleksandra]

Спасибо, будем пробовать.
 

- Исправлена проблема с "Too many open files" при проверке / через команду drweb-ctl netscan

В чем именно была проблема? Подробности будут?

[Aleksandra]

За вчера и сегодня проверила более 50 сайтов. Проблема решена, спасибо! Ошибок и зависаний больше нет.

[Boris Savelev]

ура)

 

пока решили проблему в лоб - задрали лимиты. В будущих версиях планируется более хитрый подход к этой проблеме

[NickM]

SpIDer не стартует:

Ошибка x113. Недоступен модуль ядра Linux для SpIDer Guard

 
Система такая:

#lsb_release -a
LSB Version:    :base-4.0-ia32:base-4.0-noarch:core-4.0-ia32:core-4.0-noarch:graphics-4.0-ia32:graphics-4.0-noarch:printing-4.0-ia32:printing-4.0-noarch
Distributor ID:    GosLinux
Description:    GosLinux release 6.6 (IC3) Standart Workstation
Release:    6.6
Codename:    IC3

 
Собирать ядро самостоятельно или попытаться разобраться в чем дело? Ведь ОС из списка поддерживаемых - CentOS 6.6 + с якобы заявленной поддержкой из коробки.

Spoiler

[Igorn]

Всё-таки не CentOS

А какая версия ядра? (uname -r)

[NickM]

# uname -r
3.10.105-2.el6.i686

 

[NickM]

SELinux может оказаться здесь при делах?

[Igorn]

В messages, наверное, должно быть видно.

[Igorn]

что касается сообщений от наших компонентов, выполните

#drweb-ctl cfset root.loglevel debug

#drweb-ctl cfset root.log /tmp/log

и посмотрите /tmp/log

[NickM]

Jul 27 16:33:29 gos1pc drweb-configd[1483]: User "root" has been successfully authenticated and authorized
Jul 27 16:33:34 gos1pc drweb-spider[3406]: LinuxSpider 11.0.3.1704092330
Jul 27 16:33:35 gos1pc drweb-spider[3406]: LKM cannot be loaded: Module drweb not found.
Jul 27 16:33:35 gos1pc drweb-spider[3406]: LKM cannot be loaded: unexpected error
Jul 27 16:33:35 gos1pc drweb-spider[3406]: Cannot init any filesystem interceptors
Jul 27 16:33:35 gos1pc drweb-spider[3406]: Exit with status 113 (Kernel module is not available)

# drweb-ctl cfset root.loglevel debug
# drweb-ctl cfset root.log /tmp/log
# tailf /tmp/log
2017-Jul-27 16:34:41 [1483] Debug: LinuxSpider-3637: Log disconnected
2017-Jul-27 16:34:41 [1483] Debug: LinuxSpider-3637: Terminated 113 (Kernel module is not available)
2017-Jul-27 16:34:41 [1483] Debug: LinuxSpider-3637: Destroyed
2017-Jul-27 16:34:43 [1483] Debug: Scheduler: Next update at 2017-Jul-27 17:04:43
2017-Jul-27 16:34:43 [1483] Debug: Update-3636: Task disconnected
2017-Jul-27 16:34:43 [UP-3636] Notice: Exit with status 0 (Success)
2017-Jul-27 16:34:43 [1483] Debug: Update-3636: Log disconnected
2017-Jul-27 16:34:43 [1483] Debug: Update-3636: Terminated 0 (Success)
2017-Jul-27 16:34:43 [1483] Debug: Update-3636: Expected termination
2017-Jul-27 16:34:43 [1483] Debug: Update-3636: Destroyed
2017-Jul-27 16:34:58 [1483] Debug: Ini patch: LinuxSpider.Start = "No"
2017-Jul-27 16:34:58 [1483] Debug: IniFile: Change: [LinuxSpider] Start OK
2017-Jul-27 16:34:58 [1483] Debug: IniFile: "/etc/opt/drweb.com/drweb.ini": saved
2017-Jul-27 16:34:58 [1483] Info: ScanEngine.MaxForks: Using auto value "4"
2017-Jul-27 16:34:58 [1483] Debug: Master config diff: LinuxSpider.Start = "No"
2017-Jul-27 16:34:58 [1483] Debug: Active config diff: LinuxSpider.Start = "No"
2017-Jul-27 16:34:58 [1483] Debug: License: "/etc/opt/drweb.com/drweb32.key": key file not changed
2017-Jul-27 16:34:58 [1483] Debug: Supervisor: config changed for (LinuxSpider)
2017-Jul-27 16:34:58 [1483] Debug: Supervisor: using runlist (LinuxFirewall)
2017-Jul-27 16:35:01 [1483] Debug: Ini patch: LinuxSpider.Start = "Yes"
2017-Jul-27 16:35:01 [1483] Debug: IniFile: Change: [LinuxSpider] Start OK
2017-Jul-27 16:35:01 [1483] Debug: IniFile: "/etc/opt/drweb.com/drweb.ini": saved
2017-Jul-27 16:35:01 [1483] Info: ScanEngine.MaxForks: Using auto value "4"
2017-Jul-27 16:35:01 [1483] Debug: Master config diff: LinuxSpider.Start = "Yes"
2017-Jul-27 16:35:01 [1483] Debug: Active config diff: LinuxSpider.Start = "Yes"
2017-Jul-27 16:35:02 [1483] Debug: License: "/etc/opt/drweb.com/drweb32.key": key file not changed
2017-Jul-27 16:35:02 [1483] Debug: Supervisor: config changed for (LinuxSpider)
2017-Jul-27 16:35:02 [1483] Debug: Supervisor: using runlist (LinuxSpider, LinuxFirewall)
2017-Jul-27 16:35:02 [1483] Debug: Monitor: Launch LinuxSpider "/opt/drweb.com/bin/drweb-spider"
2017-Jul-27 16:35:02 [1483] Debug: Monitor: LinuxSpider IPC 9->26 LOG 28->29
2017-Jul-27 16:35:02 [1483] Info: LinuxSpider started with pid=3772
2017-Jul-27 16:35:02 [LS-3772] Notice: LinuxSpider 11.0.3.1704092330
2017-Jul-27 16:35:02 [LS-3772] Error: LKM cannot be loaded: Module drweb not found.
2017-Jul-27 16:35:02 [LS-3772] Error: LKM cannot be loaded: unexpected error
2017-Jul-27 16:35:02 [LS-3772] Error: Cannot init any filesystem interceptors
2017-Jul-27 16:35:02 [LS-3772] Notice: Exit with status 113 (Kernel module is not available)
2017-Jul-27 16:35:02 [1483] Debug: LinuxSpider-3772: Task disconnected
2017-Jul-27 16:35:02 [1483] Debug: LinuxSpider-3772: Log disconnected
2017-Jul-27 16:35:02 [1483] Debug: LinuxSpider-3772: Terminated 113 (Kernel module is not available)
2017-Jul-27 16:35:02 [1483] Debug: LinuxSpider-3772: Destroyed

 

Сообщение было изменено NickM: 27 Июль 2017 - 14:35

[Igorn]

а попробуйте для спайдера вручную задать режим Fanotify:

# drweb-ctl cfset LinuxSpider.Mode fanotify