Сообщений в теме: 14

[storming]

Сабж

[vkazar]

Встречный вопрос: а надо, чтобы узнал, или надо, чтобы не узнал?)

 

В любом случае, я думаю, это корректируется userAgent'ом.

[Shyster]

Если используете стандартные браузеры, то только по косвенным признакам, таким как скорость.

Или возможно отловить функции JS  которые пренадлежат селениуму, но это нужно именно их ловить внутри сайта, не думаю что это кто то будет делать. 

[vkazar]

Если используете стандартные браузеры, то только по косвенным признакам

Ну, если их надо "подружить", т.е. указать сайту, что работает селениум, то через userAgent можно, как я и говорил выше :)
Если же задача в том, чтобы не дать селениуму воспользоваться сайтом - то да, как говорил *Shyster* - только косвенные признаки, ибо селениум на то и рассчитан, чтобы моделировать работу пользователя.

[storming]

Я обычно завожу селениум в букмекерскую контору, чтобы получить коэффициенты в удобном виде, но правила БК это запрещают.

Насколько я понял, стоит этого опасаться.

[vkazar]

Я обычно завожу селениум в букмекерскую контору, чтобы получить коэффициенты в удобном виде, но правила БК это запрещают.
Насколько я понял, стоит этого опасаться.

А у меня руки никак не дойдут приспособить селениум для бытовых нужд :)

По сабжу:
1. ставьте задержки, проматывайте страницы
2. всё-таки проверьте userAgent, что там ничего лишнего
3. считывайте данные под проксёй с левого акка

4. прекратите кормить тунеядцев 

 

ПыСы а БК прямо прописал селениум?) или запрещает автоматизировать?

[barancev]

WebDriver добавляет в элемент html специальное свойство webdriver="true".

По этому признаку его можно обнаружить, добавив на страницу несложный скрипт, который проверяет это свойство и при его наличии блокирует действия.

 

 21-09-2015 17-24-59.png   22,42К   5 Количество загрузок:

[barancev]

А вот на серверной стороне -- сложнее, потому что UserAgent -- оригинальный, да и все остальные части запроса тоже ничем не выдают наличие Selenium.

Отличить человека от робота помогает только поведенческий анализ.

[Snap]

Всем проще было сразу ответить: "Нет" 

[vkazar]

Всем проще было сразу ответить: "Нет" 

Алексей показал, что такая категоричность неверна)

 

Если мы хотим показать серверу, что тут селениум - мы можем показать (ответ - да)

Если страница хочет знать, селениум это или нет - она может увидеть (ответ - да)

Если селениум хочет спрятаться от сервера - только поведенческий анализ на сервере поможет, да и то, не совсем так) (ответ - скорее нет, чем да)

 

 

Так что скорее ответ "Скорее да, чем нет, но кто будет заморачиваться?")

[Snap]

Вопрос звучал как:

 

Может ли сайт узнать о посещении его через Selenium?

Я отвечаю "Нет". Мы же говорим о серверной стороне (слово "сайт")?

А поведенческий анализ это уже другая история. По умолчанию возьмем одно действие, указанное в вопросе "Посещение сайта", то есть заход на страницу. That's all!

[vkazar]

Покурил, родилось решение:
1. Страница видит webdriver="true" в теге html

2. Скрипт на странице отправляет запрос на сервер, что тут такая бяда

3. ...

4. PROFIT!!!

 

Сервер знает, что на такую-то страницу зашёл веб-драйвер)

Поправьте меня, если я неправ)

[barancev]

В общем, Selenium объявляет о своём присутствии, но...

 

Системы поведенческого анализа не слишком распространены, и на этом уровне пока практически никто не защищается. Ну, может быть, отслеживают частоту действий -- так это легко победить, добавив "замедлители" в сценарии.

 

Что касается добавления свойства webdriver в дерево DOM -- ничто не мешает сделать "самопальную" сборку Selenium, в которой эта фича отключена. Код же открытый.

 

Но тут важно помнить, что если вы нарушаете правила использования какого-либо сервиса -- вы находитесь не только в технической плоскости, но также в этической и юридической. И если вы нарушаете условия, удачно замаскировавшись -- это применение формулы "не пойман не вор". На самом деле вор. Просто не пойман.

[Snap]

Покурил, родилось решение:
1. Страница видит webdriver="true" в теге html

2. Скрипт на странице отправляет запрос на сервер, что тут такая бяда

3. ...

4. PROFIT!!!

 

Сервер знает, что на такую-то страницу зашёл веб-драйвер)

Поправьте меня, если я неправ)

Но это уже костыль. Мы же говорим о данных по умолчанию (userAgent, IP и т.д.)

 

Кстати автор не уточнил, что именно он имел ввиду под Selenium, если говорить о Selenium IDE (Builder), то он ничего не добавляет в DOM.

[as020792]

Насколько сейчас это актуально? http://prntscr.com/gg9qic - как сейчас я вижу данный атрибут не добавляется. Сейчас есть какие-то явные "флаги"? 

Вы писали о своей сборке браузера. есть материалы у кого-то под рукой о создании браузера и о том как их подружить с Селениумом?