크롤링은 엣지 케이스를 내가 처리하느냐 내가 돈을 준 업체가 처리하느냐 정도의 차이일뿐 누군가 그걸 해야하더라.
https://x.com/i/web/status/1886055516151148709
크롤링은 엣지 케이스를 내가 처리하느냐 내가 돈을 준 업체가 처리하느냐 정도의 차이일뿐 누군가 그걸 해야하더라. 금융정보 직접 크롤링하다가 나름 대형업체의 서비스로 바꾼 적이 있었는데, 방문해보니 거기서 자랑하는 것은 엣지케이스를 24시간 신속대응할 수 있는 많은 인력과 관제실…🥲
https://x.com/i/web/status/1886055516151148709
크롤링 많이 해보고 난 후 경력에서는 누가 크롤링 말을 꺼내면 일단 반대한다. 우리 제품에 열심히 코드리뷰해가며 if문 한개씩 없애며 복잡도를 줄여놨는데, 크롤링을 프로세스에 넣는 순간 대상 시스템의 카오스가 우리 제품에 더해진다. 물론 가치가 충분하다면.. 까야지..