회사에서 하는 프로젝트 때문에 구글에서 이미지를 긁어오기 위한 작업을 진행하고 있습니다. 웹쪽은 크게 관련이 없던 분야다보니 사실 아는 지식이 많지는 않은데요.
일단 딥러닝 때문에 특정 인물들의 얼굴을 최소 500장은 모아야하는 상황이다보니 수동으로 모을 수는 없고 자동으로 하려고 하고 있는 중입니다. 처음에는 HttpClient를 통해서 검색 Url을 날린 다음에 결과값을 얻어오려고 해봤습니다만, 결과가 일부는 redirect가 되어서 사실상 HttpClient의 결과값의 response로 바로 넘어오는 것이 아니더군요.
결국 돌고돌아 외부 라이브러리의 도움이 필요하다는 결론까지 도달하기에 그리 오랜 시간이 걸리지는 않았습니다. 그래서 결국 모두가 사용한다는 Selenium을 설치하기에 이릅니다.
저는 C#으로 작업을 하고 있었기에 Nuget 관리자를 통해서 설치를 했습니다. Selenium.WebDriver Selenium.WebDriver.CrhomeDriver 일단 위의 2가...
#Crawling
#으로
#에서
#스크래핑
#송강호
#셀레니움
#사람구별
#배우얼굴모으기
#딥러닝
#네이버
#구글
#Selenium
#Scrapping
#DL
#DeepLearning
#C샵
#크롤링
원문링크 : C#으로 구글에서 인물 사진 스크래핑하기 1편 - 구글에서 얼굴 이미지 얻어오기