по какой логике веб-сканер нажимает на определенные элементы на веб-странице

Question

по какой логике веб-сканер нажимает на определенные элементы на веб-странице

0

Я написал приложение искателя, которое открывает данную веб-страницу и получает HTTP-запросы и хранит их на листе excel.

Теперь у меня есть несколько кнопок, для которых я связал события кликов с помощью jQueries (или вы можете думать о событиях onClick для кнопок). Теперь, что может быть логикой, чтобы мой искатель нажимал на эти кнопки и получал HTTP-запросы и делал то же самое, что я сказал ранее.

Итак, просто, как я могу позволить своему искателю нажимать на кнопки?

221B 09 нояб. 2013, в 11:32

Источник

0

Я не думаю, что это простая вещь. Для этого ваш сканер должен уметь понимать и выполнять javascript. Я думаю, что вам нужен безголовый браузер для этого phantomjs.org
Khanh TO 09 нояб. 2013, в 09:44
0

Это если только кнопки не являются простыми гиперссылками. Я на самом деле немного смущен формулировкой « ... получает запросы HTTP ... » - не уверен, что из этого понять
Alexander 09 нояб. 2013, в 09:44
0

@Alexander Давайте рассмотрим пример, я открыл stackoverflow.com с помощью моего сканера, я получаю HTTP-запросы, такие как google-analytics.com/ga.js , и #n количество элементов будет загружаться, когда браузер отображает веб-страницу. Поэтому мой сканер берет это (из отладчика Fiddler) и подталкивает к листу Excel. Моя проблема заключается в загрузке чего-либо, что может сделать мой сканер, но как мне заставить мой сканер нажимать на определенные ссылки?
221B 09 нояб. 2013, в 09:55
0

@KhanhTO Спасибо за предложение, не могли бы вы дать мне пример
221B 09 нояб. 2013, в 10:10

Показать ещё 2 комментария

Теги:

c#

javascript

jquery

.net

web-crawler

1 ответ

Ещё вопросы

Я не думаю, что это простая вещь. Для этого ваш сканер должен уметь понимать и выполнять javascript. Я думаю, что вам нужен безголовый браузер для этого phantomjs.org
Это если только кнопки не являются простыми гиперссылками. Я на самом деле немного смущен формулировкой « ... получает запросы HTTP ... » - не уверен, что из этого понять
@Alexander Давайте рассмотрим пример, я открыл stackoverflow.com с помощью моего сканера, я получаю HTTP-запросы, такие как google-analytics.com/ga.js , и #n количество элементов будет загружаться, когда браузер отображает веб-страницу. Поэтому мой сканер берет это (из отладчика Fiddler) и подталкивает к листу Excel. Моя проблема заключается в загрузке чего-либо, что может сделать мой сканер, но как мне заставить мой сканер нажимать на определенные ссылки?
@KhanhTO Спасибо за предложение, не могли бы вы дать мне пример

Akshat Goel · Answer 1 · 2013-11-09T08-35-00.000Z

Прежде всего, вам нужно будет сделать сканер, который сможет понять и проанализировать javascript.
Даже если вы в состоянии это сделать, это зависит от реализации функции click/OnClick, если вы сможете получить ссылку. например, ссылки, данные через document.location, могут быть поняты, но будет очень сложно понять, создается ли ссылка через вызов ajax.

Это основная причина, по которой SEO-контент на сайте не загружается через javascript

Спасибо за ответ. Да, именно это моя проблема. Я хочу, чтобы мой сканер зашел на страницу веб-сайта и продукта, а затем добавил продукт в корзину, т.е. нажмите кнопку «Добавить в корзину». Как мне сделать так, чтобы мой продукт нажимал на кнопку «Добавить в корзину»?