Поиск

Opensource: Vessel — Ruby фреймворк для краулинга веб-страниц

Posted on 23.04.2021 | By Evrone.com

Vessel — open-source решение для веб-краулинга, разработанное в Evrone.

Мы в Evrone создали на Ruby высокоуровневый фреймворк для сканирования веб-сайтов. С его помощью можно парсить данные с веб-сайтов для последующего анализа, мониторинга или архивирования.

В статье про проект Machinio https://evrone.ru/machinio рассказываем, как автоматически собирать информацию с разных сайтов и систематизировать её на едином маркетплейсе.

На сайте Evrone расширенная статья о фреймворке Vessel https://evrone.ru/vessel-open-source-reshenie-dlya-veb-kraulinga-i-veb-skreypinga

Vessel — это быстрый высокоуровневый фреймворк с открытым исходным кодом для сканирования и получения данных с веб-страниц, созданный на основе Ferrum — драйвера с минимальным количеством зависимостей, написанного на чистом Ruby, для запуска headless Google Chrome.

Репозиторий проекта на https://github.com/rubycdp/vessel Github.

Читайте на сайте в русской или английской версии:

Ruby https://evrone.com/ruby

Ferrum https://evrone.com/ferrum-ruby-chrome-driver

Vessel https://evrone.com/vessel-framework

Category: Интернет, Интернет, Web, программы, Софт и программирование, Услуги, сервис | Tag: , , , , , , ,