계획에서 틀어진 첫 실패 경험이 생겼다.
바로 크롤링에서이다. 크롤러를 만드는 걸 실패했다기 보다는 정보자체가 좀 민감한 정보다 보니까 크롤링을 못하게
스크립트를 안보이거나 막아둔 경우가 대부분인데다가, 해당 기업들의 데이터는 그 기업들의 사유재산이다 보니
허락없이 크롤링하는 것 자체가 불법적인 일이었고, 그래서 크롤링으로 데이터를 모으는 것은 예상과는 다르게 매우
극소수의 정보만 을 모을 수 있었다. 때문에 크롤링이 아닌 업체에 정식적으로 데이터를 요청 또는 구매를 할려는
방향으로 진행을 결정했다.
'SW마에스트로 11기' 카테고리의 다른 글
소프트웨어 마에스트로 11기 종료 (0) | 2020.12.20 |
---|---|
SW마에스트로 11기 합격 (1) | 2020.06.17 |