이전 포스팅에서는 멀티 스레드 크롤러를 사용할 때 발생할 수 있는 동시성 문제에 대해 다루었다. 이번 포스팅에서는 각 웹사이트 구조에 따라 몇 가지 패턴으로 분류되는 크롤링 방식을 트레이트로 추상화한 사례를 소개하려고 한다.

이번에 이직을 위해 프론트엔드 채용 공고를 한눈에 훑어보면서 Rust 언어도 공부해 볼 겸 채용 공고 크롤러를 만들어보았다. 각 공고들의 다음 정보들을 모아 CSV 파일로 정리하는게 목적이었다. ex) 공고 제목, 회사, 경력, 마감일, 근무지, 평점, 리뷰 수, ..