네이버 뉴스 데이터 스크래핑 질문드립니다

최근 네이버가 검색 관련 업데이트 한 이후 시점부터 네이버 뉴스의 데이터 스크래핑 정확도가 낮아진 것 같습니다.
제목을 클릭하면 10개의 데이터가 추출 되어야 하는데, 7개 혹은 8개로 선택되네요.
제목 외 다른 내용들은 추출이 잘 됩니다.
아래 이미지를 참고하시면 좋을 것 같습니다.


혹시 해결 방법을 아시는 분이 있으실까요?
도움 부탁드립니다.

Hi @hjk2934

That could lies on the different element, if you see in the google search there are search results and in between there are some ads which looks similar to search, but those are not really the search

Like wise I believe you are seeing the same in the above? If so then your approach is correct only

Hope this may help you

Thanks,
Srini

Hi @hjk2934 ,
You can check before confirm selected, check number of rows
regards,

네이버 뉴스에서 extract DataTable로 뉴스 타이틀을 잡을 경우 메타데이터 항목의
태그 a 부분이 인 경우와 인 경우 두가지가 있는 것을 확인했습니다.
각 셀렉터 값이 다르게 할당되어 완벽한 방법은 아니지만, 어쩔 수 없이 해당 셀렉터가 잡히지 않는 액티비티를 따로 extract DataTable로 추출을 한 후 merger DataTable을 통해서 테이블을 병합하는 것은 어떠실까요??

1 Like