1 В избранное 0 Ответвления 0

OSCHINA-MIRROR/ironzheng-pikachu

Присоединиться к Gitlife
Откройте для себя и примите участие в публичных проектах с открытым исходным кодом с участием более 10 миллионов разработчиков. Приватные репозитории также полностью бесплатны :)
Присоединиться бесплатно
Это зеркальный репозиторий, синхронизируется ежедневно с исходного репозитория.
Клонировать/Скачать
Внести вклад в разработку кода
Синхронизировать код
Отмена
Подсказка: Поскольку Git не поддерживает пустые директории, создание директории приведёт к созданию пустого файла .keep.
Loading...
README.md
// Регистрация Worker для пакетной обработки URL
pikahcu.regist(getWorker());
pikachu.start();

// Worker
GeneralWorker generalWorker = new GeneralWorker("1", TestBean.class)
    .addPipeline(new BasePipeline(TestBean.class) {
        @Override
        public void output(Map result, String url) {
            System.out.println(result);
        }
    });

// Создание центра управления периодическими задачами
PikachuJobManage pikachuJobManage = new PikachuJobManage(pikachu);
pikachuJobManage.regiest(generalWorker, 1L, 5L, TimeUnit.SECONDS);

/

  • Пример создания пакетного Worker для разбивки на страницы

  • @return */ public BathWorker getWorker() { int i = 1; while (i < 100) { String url = "https://hz.lianjia.com/ershoufang/xihu/pg" + i + "/"; urlList.add(url); i++; } attr.put("title", new Target("title", "List", "body > div.content > div.leftContent > ul > li > div.info.clear", null)); attr.put("price", new Target("price", "String", "body > div.content > div.leftContent > ul > li > div.info.clear > div.priceInfo > div > span", null));

    worker = new BathWorker("lj") .method(MatchUrl.Method.GET) .urlList(urlList) .attr(attr) .addPipeline(new LianjiaPipeline(lianjiaRepository)); return worker; }


Комментарии ( 0 )

Вы можете оставить комментарий после Вход в систему

Введение

Описание недоступно Расширить Свернуть
Apache-2.0
Отмена

Обновления (1)

все

Участники

все

Недавние действия

Загрузить больше
Больше нет результатов для загрузки
1
https://gitlife.ru/oschina-mirror/ironzheng-pikachu.git
git@gitlife.ru:oschina-mirror/ironzheng-pikachu.git
oschina-mirror
ironzheng-pikachu
ironzheng-pikachu
master