Парсинг (сканирование) сайта из 1С на примере сайта по криптовалюте

25.10.17

Интеграция - Сайты и интернет-магазины

+9 –
>
  • парсер.png
  • курсывалют1с.png
Актуальная обработка с конфигурацией по парсингу на примере сайта http://coinmarketcap.com/ Сканирует всю историю курсов криптовалют.

Файлы

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование Скачано Купить файл
Парсинг (сканирование) сайта из 1С:
.cf 1,41Mb ver:1.1
21 2 150 руб. Купить

Подписка PRO — скачивайте любые файлы со скидкой до 85% из Базы знаний

Оформите подписку на компанию для решения рабочих задач

Оформить подписку и скачать решение со скидкой

Саму же доработку можно переделать под парсинг любого несложного сайта.

Особенности

  1. Используется компонента, которая нормализуют html код, благодаря чему он становится валидным для парсинга.
  2. Другая компонента позволяет считывать код html по тегам, что упрощает работу со страницей.
  3. Понадобится зарегистрировать эти компоненты.
  4. Лучше запускать 1С под правами администратора, иначе может не взлететь.
  5. Для работы потребуется установленный Net Framework 4 и Elisy .Net Bridge
  6. Если парсер не запускается при выполнении вышеизложенных условий - значит нужно руками зарегистрировать компоненту  //infostart.ru/public/165910/

Тестировалось на платформе: 8.3.9.1850.

Вступайте в нашу телеграмм-группу Инфостарт

Парсинг сайтов сканирование сайтов

+9 –

См. также

Оплата товара "Долями" в 1С:Розница 2.3

Сайты и интернет-магазины 1С v8.3 1С:Розница 2 Розничная и сетевая торговля (FMCG) Россия Платные (руб)

Интеграция сервиса dolyame.ru с 1С:Розница 2.3 для приема платежей в рассрочку. Готовое интеграционное решение для оплаты покупок Долями в 1C:Розница 2.3. Реализовано в виде расширения. Интеграция сервиса dolyame.ru для приема платежей в рассрочку. Поддерживает работу от разных юридических лиц. Работа: в составе РИБ, отдельно от РИБ, тонкий, толстый клиент, web-клиент (через интернет-браузер), поддерживается старый РМК, работа через чек ККМ.

24000 руб.

19.12.2023    10239    59    14    

55
Интеграция Альфа Авто 5 и 6 и AUTOCRM + LOGICSTARS

Сайты и интернет-магазины WEB-интеграция Системный администратор Программист Пользователь 1С v8.3 1C:Бухгалтерия 1С:Управление торговлей 11 Автомобили, автосервисы Россия Управленческий учет Платные (руб)

Интеграционный модуль обмена между конфигурацией Альфа Авто 5 и Альфа Авто 6 и порталом AUTOCRM / LOGICSTARS. Данный модуль универсален. Позволяет работать с несколькими обменами AUTOCRM / LOGICSTAR разных брендов в одной информационной базе в ручном и автоматическом режиме.

36000 руб.

03.08.2020    21585    30    24    

24
Парсинг цен на маркетплейсах – «Мониторинг цен» – расширение 1С для отслеживания и анализа цен конкурентов на Wildberries, Ozon, Мегамаркет и т.д.

Маркетплейсы Сайты и интернет-магазины Программист Пользователь 8.3.14 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Платные (руб)

Сервис парсинга цен на маркетплейсах помогает отслеживать и проводить анализ цен для Ozon, Wildberries, Мегамаркет и т.д. только для одного региона – Москва и Московская область. Выполняйте анализ и контролируйте цены Ваших конкурентов сразу в системе 1С.

2400 руб.

29.05.2023    11689    47    43    

27
Модуль обмена 1С с сайтом на платформе Битрикс: настройка для БП 3.0

Оптовая торговля Розничная торговля Сайты и интернет-магазины Программист 1С v8.3 Бухгалтерский учет 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Платные (руб)

Расширение для настройки обмена данными с сайтом на платформе 1С:Битрикс (и подобными) для 1С: Бухгалтерия предприятия 3.0.

18000 руб.

18.03.2019    37133    108    114    

89
Выгрузка заказов из 1С в MEASOFT API (ранее "Курьерская служба 2008") [РАСШИРЕНИЕ]

Сайты и интернет-магазины Программист Пользователь 1С v8.3 Бухгалтерский учет 1С:Бухгалтерия 3.0 Россия Платные (руб)

Данный модуль предоставляет возможность выгружать заказы из 1С: Управление торговлей 11 версии в "MEASOFT" (ранее "Курьерская служба 2008").

9600 руб.

27.04.2022    12434    22    3    

13
Интеграция и выгрузка для АВИТО для 1С: УТ, УНФ и Розница

Сайты и интернет-магазины 1С v8.3 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:Управление торговлей 11 Россия Платные (руб)

Модуль выгрузки товаров услуг из 1С для сайта "Авито" раздел "Автозагрузка" выполнена в виде обработки. Обработка подходит для конфигураций УТ, УНФ и Розница. Данная обработка позволяет создавать шаблон с объявлениями для "Авито" - "Автозагрузка".

4200 руб.

07.06.2022    20735    47    56    

48
Оплата товара "Долями" в 1С:Розница 3.0 (для работы с сервисом dolyame.ru)

Сайты и интернет-магазины 1С v8.3 1С:Розница 3.0 Розничная и сетевая торговля (FMCG) Россия Платные (руб)

Готовое интеграционное решение для оплаты покупок Долями в 1C:Розница 3.0. Реализовано в виде расширения. Интеграция сервиса dolyame.ru для приема платежей в рассрочку. Поддерживает работу от разных юридических лиц. Работа: в составе РИБ, отдельно от РИБ, тонкий, толстый клиент, web-клиент (через интернет-браузер). Интегрировано в Чек ККМ, Рабочее место кассира (РМК)

26400 руб.

02.11.2024    2689    13    2    

11
Простой мониторинг цен (так просто ещё не было)

Прайсы Оптовая торговля Ценообразование, анализ цен Сайты и интернет-магазины Пользователь 1С v8.3 1C:Бухгалтерия 1С:Управление торговлей 11 Управленческий учет Платные (руб)

Легкая обработка для мониторинга цен практически любого сайта (парсинга), не требует специальных знаний при настройке.

6960 руб.

17.04.2017    33393    30    28    

43
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. swimdog 782 25.10.17 12:36 Сейчас в теме
Компонента не BadRabbit называется? ))
amoarok; +1 – Ответить
2. ollega 117 25.10.17 12:38 Сейчас в теме
HtmlAgilityPack_dll и ElisyNetBridge
+ – Ответить
3. mikl79 120 26.10.17 09:44 Сейчас в теме
Добрый день.
установил компоненту, но все равно пишет Установите компоненту и т.д.

по отладчику отловил, не выполняется функция ПодключитьВнешнююКомпоненту("Elisy.NetBridge4")

подскажите в чем проблема?
+ – Ответить
4. ollega 117 26.10.17 09:48 Сейчас в теме
(3) 1С должна быть запущена от имени Администратора, если это не помогает - значит нужно руками зарегистрировать компоненту, описано тут: https://infostart.ru/public/165910/
+ – Ответить
5. mikl79 120 26.10.17 11:04 Сейчас в теме
(4), у меня сервер 1с 32-разрядный
+ – Ответить
6. mikl79 120 26.10.17 11:09 Сейчас в теме
действительно, когда 1с запустил от имени Администратора загрузка пошла, в чем прикол?
+ – Ответить
7. ollega 117 26.10.17 11:11 Сейчас в теме
(6) значит прав не хватает 1Ске на работу с компонентой.
+ – Ответить
8. mikl79 120 26.10.17 11:12 Сейчас в теме
только валюта создалась не корректная, в наим-ии, например, LTC¶ Litecoin,
а Сокр. наим-е пустое
+ – Ответить
9. ollega 117 26.10.17 11:14 Сейчас в теме
(8) Значит что-то в сайте изменилось за это время, у меня нормально сканировалось. Поправлю - залью снова. (попозже)
+ – Ответить
10. mikl79 120 26.10.17 11:15 Сейчас в теме
и до сих пор грузит, до каких времен он будет грузить?
+ – Ответить
11. ollega 117 26.10.17 11:18 Сейчас в теме
(10) 1000 с лишним валют - грузит долго первый раз. Может час.
Прервать загрузку всегда можно нажатием CTR+Break
+ – Ответить
12. mikl79 120 26.10.17 11:33 Сейчас в теме
спасибо, для себя приятно узнал, что в УФ реализовали ОбработкаПрерыванияПользователя и Состояние, наконец-то
+ – Ответить
13. rpgshnik 3927 07.11.17 12:21 Сейчас в теме
Эта компонента ПодключитьВнешнююКомпоненту("Elisy.NetBridge4") если демо, сколько раз она работает?
+ – Ответить
14. ollega 117 07.11.17 12:25 Сейчас в теме
(13) У клиента стоит уже около года и не жалуется...
+ – Ответить
15. rpgshnik 3927 07.11.17 12:31 Сейчас в теме
(14) хм... а я сначала обрадывался всё круто отработало. А потом отвалилось напрочь. Подумал может количеством запусков как-то ограниченно. Там постоянно выскакивает окно - что версия ограниченная.

Глюк смог поправить путем перезапуска скриптов в корне "софтины" unreg.vbs и reg.vbs
+ – Ответить
16. ollega 117 07.11.17 12:44 Сейчас в теме
(15) Хм, может кому полезна будет эта информация, у самого проблем не возникало подобных.
+ – Ответить
17. rpgshnik 3927 08.11.17 12:05 Сейчас в теме
(16) Добрый день. Если не сложно помогите разобраться в методах.
Запилил такой код при разборе страницы: 

	НодыСтраницы = HAP.DocumentNode.SelectNodes(".//div");
	Результат = "";
	Для i = 0 По НодыСтраницы.Count - 1 Цикл
		Результат = Результат + "Нод " + i + " [" + ЧтоТутНаписать + "] InnerText ========================" 
		+ НодыСтраницы.get_Item(i).InnerText + Символы.ПС + "========================";		
	КонецЦикла;


Хочу получить сам нод, как он представлен в хтмл... т.е. к примеру <div class="detail-list">
Я попробовал НодыСтраницы.get_Item(i) , он мне вернул [COMОбъект] :)))
+ – Ответить
18. rpgshnik 3927 09.11.17 14:30 Сейчас в теме
(17) вопрос не актуален разобрался.
Не разобрался только как получить ноды скрипта...
+ – Ответить
19. ollega 117 10.11.17 13:21 Сейчас в теме
(18) С этим всем уже самостоятельно. Занят постоянно)
+ – Ответить
20. fratriaArzgir 11.07.21 09:26 Сейчас в теме
Обработка еще актуальна? Или на текущий момент она не работоспособна?
+ – Ответить
21. ollega 117 07.10.21 13:09 Сейчас в теме
(20) вообще без понятия, допилить немного никогда не поздно будет. Вообще лучше питоном парсить, чем 1С)
+ – Ответить
Для отправки сообщения требуется регистрация/авторизация