Следить за изменениями на странице не заходя на неё - C#
Формулировка задачи:
Добрый день.
Надо часто обходить большое количество страниц (~30 000) и посмотреть на них определенную информацию, сравнить с имеющейся. По примерным подсчетам, выходит, что на это потребуется чуть меньше 10 часов.
Подскажите, пожалуйста, есть ли способ сделать это быстрее, чем загружать каждую страницу через HttpGetRequest/WebClient? Может быть можно узнать дату изменения страницы отдельно и гораздо быстрее? Или использовать какой-то сервис для этой цели?
Решение задачи: «Следить за изменениями на странице не заходя на неё»
textual
Листинг программы
HTTP/1.1 200 OK Server: nginx/1.2.4 Date: Fri, 15 Feb 2013 20:29:08 GMT Content-Type: application/x-javascript Last-Modified: Thu, 18 Oct 2012 07:36:05 GMT Transfer-Encoding: chunked Connection: keep-alive Expires: Tue, 19 Feb 2013 20:29:08 GMT Cache-Control: max-age=345600 Content-Encoding: gzip
ИИ поможет Вам:
- решить любую задачу по программированию
- объяснить код
- расставить комментарии в коде
- и т.д