SoftTimeLimitExceeded 에러가 나타납니다.
SoftTimeLimitExceeded 에러 메시지는 데이터를 추출하고자 하는 웹 사이트의 로딩이 느리거나, 데이터 추출 작업이 오래 걸려 리스틀리 수집기당 최대 대기 시간 (10분)을 넘겼을 때 발생하는 메시지입니다. 즉, 특정 웹 사이트의 서버가 너무 느리거나 한 페이지에 포함되어 있는 추출 데이터가 수천 개 이상일 때 발생할 수 있어요.
이 경우, 다음과 같은 방법으로 문제를 해결해보실 수 있습니다.
1) 리스틀리 프록시 서버를 변경해 재시도하기
2) 추출 데이터의 양을 나누어서 재시도하기
예를 들어, 기존에 4,000개의 웹 페이지를 한 번에 추출하려고 하셨다면, 2,000개씩 웹 페이지를 2번 추출을 하는 방식으로 문제를 해결해보실 수 있어요. 그럼에도 불구하고 문제가 해결되지 않는다면, hello@listly.io로 리스틀리 가입 계정과 에러가 발생한 URL 주소를 첨부해 알려주세요. 리스틀리팀이 최대한 빠르게 문제를 진단해 도와드리겠습니다.