Vanilla Scraper

국내외 다양한 웹사이트의 정제된 데이터를 편리하게 가져올 수 있는 솔루션입니다. 서버 뿐만 아니라 클라이언트에서도 데이터를 수집할 수 있으며 최신 웹사이트 정보가 항상 업데이트 되어 변경사항 적용이 용이합니다.

vanilla scraper logo

Vanilla Scraper
동적 규칙기반 웹 스크래핑 솔루션

웹 데이터를 크롤링 하는데 처음 접근은 쉬우나 변경이 잦아 많은 어려움이 있습니다. 이를 해결하기 위해 각 사이트마다 동적 Rule을 만들고 실시간 푸시 방법으로 공유하여 정밀하게 데이터를 가져오는 것이 가능합니다. JVM또는 Swift 기반의 서버나 클라이언트에서 각종 웹 사이트의 데이터를 설정파일에서 Rule 을 동적으로 설정하여 쉽게 가져올 수 있습니다.

vanilla scraper 웹 스크래핑 솔루션 설명 이미지

모듈 상세

데이터 스크래핑 기술을 서버 뿐만 아니라 클라이언트도 적용하여 더욱 정제된 데이터를 수집합니다. 컨텐츠 리더빌리티 기능과 연계하여 정제된 텍스트 처리 – 규칙을 실시간으로 적용가능 합니다. HDFS, S3(Amazon) 등의 빅데이터 연계 저장 할 수 있습니다.

vanilla scraper 모듈 상세