FlowCrawler программа для автоматизации браузера

FlowCrawler — программа для автоматизации браузера. Она позволяет автоматически собирать и/или публиковать данные в Интернет. По сути, это визуальный конструктор ботов. В нём всё делается мышкой, писать регулярки и селекторы руками не обязательно.


В отличие от традиционных парсеров и постеров, FlowCrawler не заточен строго под определенные сайты. Вместо этого, он позволяет вам создавать любую собственную логику в виде блок-схемы. Вы определяете алгоритм, а бот делает любую работу — парсит сайты или сторонние API, скачивает файлы, заполняет формы и много чего еще. В рамках одного проекта бот может парсить и постить на множество сайтов одновременно.

Ближайший (и, пожалуй, единственный) известный аналог — знаменитый ZennoPoster. Однако, FlowCrawler это не клон ZP. Он использует другой подход к созданию схем. И стоит гораздо дешевле (об этом в конце поста).

Основные возможности программы

  • Основано на Chromium;
  • Доступны версии для Windows (7+) и Linux;
  • Полная натуральная эмуляция браузера и живого пользователя;
  • Парсинг: Направьте FlowCrawler на нужный URL и покажите, каким путём вы хотите пройти по сайту и какие части страниц извлечь;
  • Лёгкость настройки — никаких регулярных выражений для выборки со страниц;
  • Постинг: Автоматически заполняйте формы и выполняйте любые действия на целевых сайтах;
  • Обработка данных: фильтруйте, изменяйте, комбинируйте любые данные (строки, числа, JSON) в процессе парсинга;
  • Интеграция с ОС: запускайте внешние программы с нужными аргументами в процессе парсинга и читайте их вывод, изменяйте локальные файлы и папки;
  • Экспорт в CSV, JSON, XML и другие форматы;
  • Работа с файлами: чтение, копирование, удаление, создание папок, рекурсивное чтение папок;
  • Работа с изображениями: загрузка, изменение размера, обрезка, сохранение;

Эмуляция живого пользователя

  • FlowCrawler не отличим от живого человека для любого сайта;
  • Все сайты грузятся в настоящем браузере (в фоне или на виду), что позволяет обходить большинство проверок на ботов;
  • Возможность эмуляции действий мыши, нажатий кнопок, скроллинга, событий JavaScript и др;
  • Возможность настройки User Agent, Referer и других заголовков;
  • Автоматический подбор, подключение и ротация прокси;

Простую систему парсинга сайтов можно сделать на iMacros

Реальный ТЕСТ яркости проектор UNIC UC40

Данный тест в очередной раз показывает как Китайский брат на*бывает весь мир. Возможно я чего то не знаю и у Китайцев свои способы измерения.

напряжение и ток на светодиодной матрице. 20 v 1700 mA P=U*I
20*1700=34 Выходит 30 ватт

Прошивка и проблемы: http://4pda.ru/forum/index.php?showtopic=688295&st=1580#entry46398494

Группа в ВК https://vk.com/club95431537

Ремонт ноутбуков. Неисправности ноутбуков.

работает клавиатура ноутбука

Ремонт ноутбуковРемонт ноутбуков

Ноутбук — устройство мобильное. Ему и достаётся больше, чем декстопу: тряска, удары, падения, пролитый кофе — поэтому и ломаются ноутбуки намного чаще. Continue reading

Запуск программы невозможен FireFox и mozglue.dll

mozglue.dll

Проблема:

Не устанавливается Firefox браузер. Даже установка под «администратором» не помогает — при запуске браузера выходит ошибка:
mozglue.dll

Решение:

Чистка реестра, перезагрузка компьютера не помогла.  Была найдена предыдущая версия Firefox браузера (42.0), которая успешно установилась. 🙂

 

Основные правила «информационной гигиены»

информационная гигиена

информационная гигиенаЭлектронная почта

Зачем защищать: Через фишинговые письма хакеры могут установить зловредную программу на ваш компьютер. Continue reading