Перейти к содержимому


Фото
- - - - -

Тестирование Доктор Веб 12 веосии


  • Закрыто Тема закрыта
267 ответов в этой теме

#221 Saint-Petersburg

Saint-Petersburg

    Newbie

  • Posters
  • 74 Сообщений:

Отправлено 07 Декабрь 2018 - 18:10

Kirill Polubelov, я прекрасно понимаю, что все угрозы не добавишь в базу, и прекрасно понимаю, что идеальной методики тестирования нету, пускай этот тест и ерунда и файлы мусор. Но мне как пользователю хотелось бы, чтоб антивирус отлавливал эти файлы, и разработчики и аналитики проявляли заинтересованность в этом.

Далеко не факт, что эти файлы не попадутся в следующем тестировании или обычным вашим пользователям в реальной жизни. Так вы защитите и репутацию компании и технологии и самих пользоватлей от этих угроз.

Сообщение было изменено Saint-Petersburg: 07 Декабрь 2018 - 18:11

ip9.gif

3fadbf9ddc56.gif

 


#222 Kirill Polubelov

Kirill Polubelov

    Hr. Schreibikus

  • Dr.Web Staff
  • 4 362 Сообщений:

Отправлено 07 Декабрь 2018 - 18:33

Стало быть, не хотите читать. Или нет времени.

Тогда коротко и своими словами.

 

Вот у вас в сенях за дверью лежит топор. Вы станете с криками его выкидывать во двор, только потому что им можно зарубить кого-либо, кого рубить не стоило бы?

А если топор окажется в руках разъярённого человека, который размахивая им мчит на вас, а у вас по случаю, оказалось заряженное ружье?

 

Вот так и в совр. антивирусах. Но и то, не без нюансов, некоторые "топоры" уничтожают даже когда они ещё в сенях валяются.

 

Но это очень упрощённо и не про все варианты.

 

Следствием такого подхода являются случаи, когда, казалось бы, _запущенный_ файл, который должен детектиться, не детектится. Всё потому, что механизм его распространения/запуска считается совсем другим, нежели используется в тесте.

Продолжая аналогию, в тесте -- топор взял, зачем-то, сам владелец, что, топор должен теперь взорваться у него в руках?


(exit 0)

#223 sergeyko

sergeyko

    Guru

  • Dr.Web Staff
  • 3 925 Сообщений:

Отправлено 07 Декабрь 2018 - 18:34

Далеко не факт, что эти файлы не попадутся в следующем тестировани

Ох. Да все равно нам на эти тестирования. 

 

Но мне как пользователю хотелось бы, чтоб антивирус отлавливал эти файлы, и разработчики и аналитики проявляли заинтересованность в этом.

Это желание вступает в прямое противоречие с целесообразностью. Разумеется, по нашему мнению. Поэтому, мы, основываясь на нашем опыте, пока продолжим заниматься тем, что позволит нашим пользователям не подвергаться заражению. А так же, не испытывать дискомфорта от работы антивируса, не замечать его влияния на производительность системы. 


Sergey Komarov
R&D www.drweb.com

#224 Вова Б16

Вова Б16

    Newbie

  • Members
  • 2 Сообщений:

Отправлено 07 Декабрь 2018 - 18:38

Не понимаю, чего тут спорить. Все продукты тестировали в равных условиях. Доктор справился фактически хуже всех.
Остальное банальные отмазки.
Да, в реальности наверно пользователи не будут отключать защитные функции самой системы. Или запускать файлы от имени администратора.
Многие наверно даже не знают как это сделать.
В тестах просто все направлено на проверку, как справится сам тестируемый продукт. Др.Веб не справился никак.

#225 Kirill Polubelov

Kirill Polubelov

    Hr. Schreibikus

  • Dr.Web Staff
  • 4 362 Сообщений:

Отправлено 07 Декабрь 2018 - 18:44

Все продукты тестировали в равных условиях

Тут у вас в методичке ошибка.


(exit 0)

#226 Вова Б16

Вова Б16

    Newbie

  • Members
  • 2 Сообщений:

Отправлено 07 Декабрь 2018 - 18:49

Причем тут методичка. Я сам пользуюсь Доктором и уверен что система у меня будет в порядке.
Поэтому не надо тут про методички. Еще кремле-ботов приплетите.
Я же не пишу, что здесь Данилов всем методички раздает)

#227 sergeyko

sergeyko

    Guru

  • Dr.Web Staff
  • 3 925 Сообщений:

Отправлено 07 Декабрь 2018 - 18:49

Все продукты тестировали в равных условиях.

Вот это о чем вообще? Пастернака не читал, но осуждаю? 

 

В тестах просто все направлено на проверку, как справится сам тестируемый продукт.

Спасибо, что разъяснили, теперь все встало на свои места. 

1473688755-dwayne.gif


Sergey Komarov
R&D www.drweb.com

#228 Saint-Petersburg

Saint-Petersburg

    Newbie

  • Posters
  • 74 Сообщений:

Отправлено 07 Декабрь 2018 - 18:53

так же, не испытывать дискомфорта от работы антивируса, не замечать его влияния на производительность системы.

Ребята, там антивирус шесть дней обезвреживал угрозы, а зависания забыли? Это тоже не интересно и так должно быть? Я понял вашу позицию, но очень жаль, что нельзя выделить одного сотрудника и 10 минут его времени для решения этого вопроса. Даже вместо этих сообщений, могли бы уже написать и взять уже файлы и добавить как положено. И как написал модератор - файлы не будут лишние.

Сообщение было изменено Saint-Petersburg: 07 Декабрь 2018 - 18:55

ip9.gif

3fadbf9ddc56.gif

 


#229 Kirill Polubelov

Kirill Polubelov

    Hr. Schreibikus

  • Dr.Web Staff
  • 4 362 Сообщений:

Отправлено 07 Декабрь 2018 - 18:54

Тогда откуда про "равные условия" инфа? Из ролика этого не следует, и в этой ветке неоднократно указывалось на неравенство.


(exit 0)

#230 SergSG

SergSG

    The Master

  • Posters
  • 14 425 Сообщений:

Отправлено 07 Декабрь 2018 - 19:01

Не понимаю, чего тут спорить. Все продукты тестировали в равных условиях. Доктор справился фактически хуже всех.
Остальное банальные отмазки.

Там тестировался только Доктор и он ни с кем не сравнивался.

Вот если б на этом же букете в это же время протестировался еще какой нибудь продукт, тогда можно было бы о чем то говорить.



#231 АВаТар

АВаТар

    Advanced Member

  • Posters
  • 844 Сообщений:

Отправлено 07 Декабрь 2018 - 19:02

Наверное, скажу банальную вещь. Тесты нужны для обнаружения:

а) багов;

б) некорректного поведения - нестабильного поведения как софта, так и ОС;

в) узких мест.

 

Предъявленный тест пытается представить нам демонстрацию сэмплов, на которые нет детекта, то ли как баг, то ли как "некорректное поведение". Но это как раз и не входит в задачи настоящего тестирования продукта (см. К.Ю. выше).

 

В остальном, если там есть а), б), или в), то тест можно пощупать поближе, или даже пожевать самому. Может, и выявится какая-то польза от него... :unsure:



#232 Aleks1989

Aleks1989

    Newbie

  • Posters
  • 14 Сообщений:

Отправлено 07 Декабрь 2018 - 19:05

Я вот  думаю, как можно оценивать продукт если он не участвует в тестах различных лабораторий, а любительские тесты все подставлены? Даже в тестирование Dr.web вызывал зависание системы и это вам не интересно. С таким отношением новых пользователей вам не видать. 


Сообщение было изменено Aleks1989: 07 Декабрь 2018 - 19:06


#233 SergSG

SergSG

    The Master

  • Posters
  • 14 425 Сообщений:

Отправлено 07 Декабрь 2018 - 19:07

Даже вместо этих сообщений, могли бы уже написать и взять уже файлы и добавить как положено. И как написал модератор - файлы не будут лишние.

Каждый день в базу добавляются тысячи семплов. И каждый день появляются новые тысячи, которые ни один АВ не знает, пока не получит образцы.

Если тестировать на свежаках, любой АВ покажет такой же результат.



#234 jB_h1pS

jB_h1pS

    Member

  • Virus Hunters
  • 356 Сообщений:

Отправлено 07 Декабрь 2018 - 19:12

Кто нибудь ловил за раз такое количество??? Я считаю глупый тест... 


AMD Ryzen 7 3700X |Gigabyte X470 Aorus Ultra Gaming | Kingston HyperX 16 Gb DDR4  | XPG GAMMIX S11 Pro 512Gb | Windows 10 x64| Dr.Web Securite Space 12.0


#235 jB_h1pS

jB_h1pS

    Member

  • Virus Hunters
  • 356 Сообщений:

Отправлено 07 Декабрь 2018 - 19:17

офф.топ. Хотя мне интересно будет как будет работать лечение/удаление, когда в 2019 году выйдет Ryzen 3-ого поколение, например 12 ядер/24 потока при 4-5 ггц... быстрее будет?? просто планирую взять 12 ядер  :)


AMD Ryzen 7 3700X |Gigabyte X470 Aorus Ultra Gaming | Kingston HyperX 16 Gb DDR4  | XPG GAMMIX S11 Pro 512Gb | Windows 10 x64| Dr.Web Securite Space 12.0


#236 SergSG

SergSG

    The Master

  • Posters
  • 14 425 Сообщений:

Отправлено 07 Декабрь 2018 - 19:21

Я вот  думаю, как можно оценивать продукт если он не участвует в тестах различных лабораторий, а любительские тесты все подставлены? Даже в тестирование Dr.web вызывал зависание системы и это вам не интересно. С таким отношением новых пользователей вам не видать. 

Наверно Вы правы. Те компании, которые "дружат" со всякими тестировщиками и регулярно заказывают для себя тесты, имеют больше клиентов. Да и клиентам спокойней.

 

А вот в жизни немного по другому - у каждого АВ вендора есть фанаты - это те клиенты, которые еще не успели поймать недетектируемую вирусню и куча врагов- эти уже успели. Почитайте коменты - досталось наверно всем ведущим вендорам. :)



#237 Saint-Petersburg

Saint-Petersburg

    Newbie

  • Posters
  • 74 Сообщений:

Отправлено 07 Декабрь 2018 - 19:36

Даже вместо этих сообщений, могли бы уже написать и взять уже файлы и добавить как положено. И как написал модератор - файлы не будут лишние.

Каждый день в базу добавляются тысячи семплов. И каждый день появляются новые тысячи, которые ни один АВ не знает, пока не получит образцы.
Только кто-то будет потом эту тысячу старых образцов определять, а кто-то нет. Только какие-то пользователи будут защищены от тысячи старых образцов, а какие-то пользователи Dr.Web не будут защищены от этой тысячи, как старых, так и новых образцов.

ip9.gif

3fadbf9ddc56.gif

 


#238 SergSG

SergSG

    The Master

  • Posters
  • 14 425 Сообщений:

Отправлено 07 Декабрь 2018 - 19:47

И да, согласен с sergeyko - заниматься твиканьем антивируса только для того, чтобы лучше проходить подобные "тесты" как-то нелепо и бесполезно …

 

Вот все пишут, что сканер - анахронизм. Многие даже это понимают. Но при этом продолжают фаршировать сканер новыми фичами, усложняя и замедляя его работу. Зачем? Единственная задача сканера - убивать дохлые тушки. Это не Куреит. Для активной заразы есть реалтаймовые фичи, а сканер - флешку проверить, внешний диск, архивы, еще какой нибудь хлам. По моему в реальной жизни как то так.



#239 SergSG

SergSG

    The Master

  • Posters
  • 14 425 Сообщений:

Отправлено 07 Декабрь 2018 - 19:53

 

 

Даже вместо этих сообщений, могли бы уже написать и взять уже файлы и добавить как положено. И как написал модератор - файлы не будут лишние.

Каждый день в базу добавляются тысячи семплов. И каждый день появляются новые тысячи, которые ни один АВ не знает, пока не получит образцы.
Только кто-то будет потом эту тысячу старых образцов определять, а кто-то нет. Только какие-то пользователи будут защищены от тысячи старых образцов, а какие-то пользователи Dr.Web не будут защищены от этой тысячи, как старых, так и новых образцов.

Так это у всех АВ вендоров так. Поймали - добавили, не поймали, ну, не повезло. Злачных мест прорва, ни одна компания за всеми не уследит. Посмотрите на вирустотал - всегда кто то чего то не знает. Особенно свежее.

А за эти "тысячи" из обзора не переживайте. С ними будет все нормально.


Сообщение было изменено SergSG: 07 Декабрь 2018 - 19:55


#240 АВаТар

АВаТар

    Advanced Member

  • Posters
  • 844 Сообщений:

Отправлено 07 Декабрь 2018 - 19:57

Только кто-то будет потом эту тысячу старых образцов определять, а кто-то нет. Только какие-то пользователи будут защищены от тысячи старых образцов, а какие-то пользователи Dr.Web не будут защищены от этой тысячи, как старых, так и новых образцов.

Зачем? Чтобы раздуть собственное эго, и базы заодно? (Вопрос был чисто риторический.)

Надо понимать, где мы находимся. В иллюзии. Ментальных игр, по большому счёту.

Всё-таки нам нужна рациональная польза (в частности, тестов), а не мифический якобы слив Доктора.


Сообщение было изменено АВаТар: 07 Декабрь 2018 - 19:58



Читают тему: 0

0 пользователей, 0 гостей, 0 скрытых