google_image_crawling

졸작 머신러닝을 위한 이미지 추출용 구글 이미지 크롤링

유의사항

1. 파이썬으로 프로그램을 처음 만들어서 환경설정이 이상했는데 코드 제일 상단의 설정으로 실행하면 됩니다.

2. 가구 이미지를 크롤링하는데 costco에서 제공하는 일부 이미지가 request되지 않아 멈추는 현상이 발생하여 costco는 예외처리

3. 이미지 형식 통일을 위해 WebP와 같은 다른 이미지 형식은 예외처리

4. sleep을 넣지 않거나 이미지 다운 시간의 delay보다 짧으면 다운이 안되어 여러번 시도 결과 1.5sec가 적당하여 sleep(1.5)로 설정