Парсинг сайтов из 1С на примере ломбарды.рф с помощью XPATH для ДокументDOM
Комментарии
В избранное
Подписаться на ответы
Сортировка:
Древо развёрнутое
Свернуть все
Редирект на столько прост, что я о нем даже говорить не стал - скучно! Особенно когда редирект внутри одного домена
О = С.Ролучить(З);
Если О.КодОтвета МЕЖДУ 300 и 399 Тогда
З = Новый HTTPЗапрос(ПолучитьУрл(О));
О = С.Получить(З);
КонецЕсли;
лучше поднапрячься и изучить как это делается в цивилизованном мире - nodejs + axios + cheerio делов на полчаса ))
XPath это непонятная хрень, иногда работает иногда нет, на определенных тегах/классах/фазах Луны
XPath это непонятная хрень, иногда работает иногда нет, на определенных тегах/классах/фазах Луны
(9) пробовал получать вложенные теги в определенном теге, указываю типа ".class1 > .class2" - НОЛЬ элементов. В консоли браузера все выбирается. Пришлось выбирать глобальным поиском по class2, но они там и в других местах были, логика усложнилась проверками. Больше с XPath не связываюсь
Возможно было бы более интересно если бы написали библиотеку на OScript типа cheerio и сделали обзор )
Возможно было бы более интересно если бы написали библиотеку на OScript типа cheerio и сделали обзор )
(13)
пробовал получать вложенные теги в определенном теге, указываю типа ".class1 > .class2" - НОЛЬ элементов
Если речь об 1С, то я даже уточнил в статье, что XPath в ней ограничен. Хотя //div[@class='c1']/div[class='c2']/text() - вполне рабочая конструкция даже для 1С.
(8) кстати, вывод автора неутешительный: "мы можем извлекать данные только из статических сайтов". Я же привел пример извлечения из динамического сайта как раз - основная хитрость тут - это разобраться с источниками данных.
Также если посмотреть на статью внимательно, то понятно становится, что ничего нового - тот же запрос к HTML-ДОМ'у, преобразованному в виртуальный ДОМ с помощью компонента node.
Также если посмотреть на статью внимательно, то понятно становится, что ничего нового - тот же запрос к HTML-ДОМ'у, преобразованному в виртуальный ДОМ с помощью компонента node.
(20) Вот имя переменной ПроцессорВыводаРезультатаКомпоновкиДанныхВКоллекциюЗначений вполне себе содержательное. Для понимания достаточно, даже если с места её объявления прокрутить несколько сотен строк, смысл всё равно будет понятен.
А вот смысловую нагрузку "О", "С", "З" можно понять, если текст, где происходит объявление этой переменной и где время её жизни заканчивается, находятся на одной экранной страннице. Не экономьте время на читабельности кода! Через некоторое время самому сложно будет этот код править.
А вот смысловую нагрузку "О", "С", "З" можно понять, если текст, где происходит объявление этой переменной и где время её жизни заканчивается, находятся на одной экранной страннице. Не экономьте время на читабельности кода! Через некоторое время самому сложно будет этот код править.
(0) Информация по теме: в версии платформы 8.3.13 у объекта ДокументHTML появилась функция НайтиПоФильтру(Фильтр). С её помощью можно получить требуемые узлы, выполнив следующий код:
Ну а затем уже анализировать дочерние элементы. Можно с помощью XPath, а можно и без.
ЧтениеHTML = Новый ЧтениеHTML;
ЧтениеHTML.УстановитьСтроку(ТекстHTML);
Построитель = Новый ПостроительDOM;
ДокументHTML = Построитель.Прочитать(ЧтениеHTML);
ЧтениеHTML.Закрыть();
ДокументHTML.НормализоватьДокумент();
Фильтр = "{
| ""type"": ""intersection"",
| ""value"":
| [
| {
| ""type"": ""elementname"",
| ""value"":
| {
| ""value"": ""div"",
| ""operation"": ""equals""
| },
| }
| ,
| {
| ""type"": ""hasattribute"",
| ""value"":
| {
| ""value"": ""class"",
| ""operation"": ""nameequals""
| }
| }
| ,
| {
| ""type"": ""hasattribute"",
| ""value"":
| {
| ""value"": ""item-info"",
| ""operation"": ""valueequals""
| }
| }
| ]
|}";
МассивУзлов = ДокументHTML.НайтиПоФильтру(Фильтр);
ПоказатьНу а затем уже анализировать дочерние элементы. Можно с помощью XPath, а можно и без.
Вопросы с вознаграждением
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|
||
|
|
|