Konan Web Crawler | Konan Technology
제품 및 서비스수집Konan Web Crawler

Konan Web Crawler

미래를 위한 기업 비즈니스 경쟁력, 코난의 제품이 높여드립니다.

Intelligent Web Crawling

웹크롤러는 지능형 웹 정보 수집 엔진입니다.

코난 웹크롤러는 인터넷에 있는 많은 정보 중 사용자가 원하는 데이터만 선택해 자동으로 수집할 수 있도록 하는 Internet Explorer기반의 웹 정보 수집 솔루션입니다.

게시판 형태의 정보 뿐만 아니라 ‘웹 페이지’ 와 ‘정형 페이지’를 동시에 수집할 수 있고, 블로그, 댓글, Ajax 페이지 등 웹의 기술 발전에 발 맞추어 수집률을 대폭 향상시킨 차별화된 제품입니다. 자바 스크립트 처리, 인증사이트와 첨부파일에 대한 수집 기능을 대폭 향상시켰고, 사용자 경험을 고려한 직관적인 인터페이스로 되어 있어 초보자도 쉽게 사용이 가능합니다.

KONAN Web Crawler 개요

특장점

images

지능형 수집
  • 뛰어난 자바스크립트 해석 능력으로 기존의 자바스크립트 패턴 기반 처리에 비해 95% 이상의 높은 수집 성공률
  • 일반 웹 문서, 정형화된 페이지, 자유형 페이지, AJAX 페이지, RSS/ATOM, 다국어 페이지, 새 창 형태로 출력되는 페이지 및 HTTPS 등 모든 페이지 수집
  • 게시판 첨부파일 및 웹 문서 내 이미지, 동영상, 첨부파일, 댓글까지 모두 수집
images

다양한 수집옵션 제공
  • 수집 시 발생하는 데드링크 체크 기능을 통한 서비스 품질 향상
  • URL 기반 중복 제거 및 필드 지정 중복 제거 기능
  • 증분 수집, 전체 재수집기능을 통해 효과적인 수집업무 수행 가능
  • 수집원 별 스케줄링 설정 기능을 통해 자동 수집 가능

images

쉬운 규칙 설정
  • Wizard 방식의 수집등록 마법사로 간단하고 쉽게 수집원 등록 가능
  • 단계별 가이드 및 사용자 제공으로 초보 관리자도 손쉽게 사용 가능
  • 사용자 경험을 고려한 직관적이고 쉬운 UI설계로 사용자 편의성 한층 강화
images

세분화된 통계 분석 기능
  • 리스트 또는 그래프 형태로 통계 조회
  • 수집시도, 수집건수, 오류건수 및 이미지/첨부 파일 수 통계
  • http / 네트워크 / 저장소 / 데드링크 / 정보추출 / url 추출/ 스크립트 실행 오류 등 상세한 수집 오류 조회 기능

아키텍처

KONAN Web Crawler 아키텍처

기대효과

  • 정부부처 및 공공기관
    • 관련 기관에 대한 통합된 정보 확인이 가능해져 업무 품질 향상 및 기관과 유기적으로 연계할 수 있는 전략 수립 가능
    • 양질의 풍부한 콘텐츠 제공으로 인해 대 국민 서비스에 대한 만족도 향상
    • 인터넷 상에서 형성되는 국민 여론에 대한 신속한 대응과 응대가 가능해져 국가 전략수립 및 대처에 효율성 증대
  • 일반 기업
    • 자사 관련 정보 수집 시간 단축 및 누락정보를 방지함으로써 업무효율 증대
    • 자사 관련 음해정보에 대한 신속한 대처능력 향상
    • 최신의 경쟁사 정보를 활용하여 효과적인 전략수립 가능
  • E-Business
    • 지속적으로 갱신되는 다양한 콘텐츠를 제공함으로써 고객의 재방문을 유도하고 홍보효과 기대
    • 자사의 부족한 콘텐츠를 외부 콘텐츠로 대체함으로써 콘텐츠 신규 생성에 대한 비용 절감 효과
    • 다양한 외부 콘텐츠의 재가공을 통해 경쟁사 대비 자사만의 차별성 강조

bi_renewal20

구축사례

images

대한민국정부포털

안전행정부는 코난 웹크롤러를 통해 8,200여 공공 기관의 13,600여개 사이트의 주제별 행정서비스를 수집하여 분야별 정보를 한 눈에 볼 수 있도록 서비스하고 있습니다.

  • Needs
    • 여러 기관 사이트에서 각기 제공되던 전자정부서비스를 한 곳에서 찾아볼 수 있게 제공하기를 원함
    • 국민이 알고 싶어하는 정보를 모아 주제별로 일목요연하게 서비스하기를 원함
  • Solution
    • 웹크롤러를 통해 13,600여개 사이트의 콘텐츠를 수집 제공
    • 700여개 주제별 행정 정보를 수집, 제공해 관심 분야별 정보를 한 눈에 볼 수 있도록 서비스
  • 적용효과
    • 정부기관을 한 곳에서 쉽게 찾아 활용가능
    • 날씨, 유실물 등 생활에 밀착된 고도화된 서비스 제공
images
images

레퍼런스

images
images
images
images
images
images
images
images
images
images
images
images
images
images

a_top

SITEMAP