Answer the question
In order to leave comments, you need to log in
How to monitor the service from parsing is it possible?
Hello.
I was given the task to work out the issue of monitoring the service from parsing.
Is it even possible ? I do not understand what to monitor and most importantly how?
And in general, how to google?
Answer the question
In order to leave comments, you need to log in
Можно по косвенным признакам.
1) Можно по логам веб сервера смотреть. Если идет парсинг, то будет перебор страниц скорее всего подряд. /page1, /page2, /page3. Но грамотный программист не будет перебирать все подряд, а скорее всего по несколько страниц.
2) Выявление какой то закономерности. Например строго раз в час начинается заходы на страницы
3) Появление информации с вашего сайта на других. Через яндекс гугл можно обнаружить.
В любом случае начинать с логов
Didn't find what you were looking for?
Ask your questionAsk a Question
731 491 924 answers to any question