웹크롤링을위한자료 썸네일형 리스트형 WarcDB - Web crawl data as SQLite DB를 소개합니다. WarcDB - Web crawl data as SQLite DB (github.com/Florents-Tselai) 를 소개합니다. README 에서는 아래와 같이 소개하고 있네요.. WarcDB is a an SQLite-based file format that makes web crawl data easier to share and query. 한마디로 아래와 같이 정리할 수 있는데요.. WarcDB는 웹 크롤링 데이터를 더 쉽게 공유하고 쿼리할 수 있도록 해주는 SQLite 기반 파일 형식입니다. 주요특징은 아래와 같습니다. 웹 크롤링한 데이터를 SQL로 쿼리하기 쉽게 만든 SQLite DB 기반 파일 포맷 wget 및 WebRecorder 등에서 사용하는 표준 Web ARChive (.warc).. 더보기 이전 1 다음
