네이버 지식인 질문 크롤러 개발일지 2020년 12월 08일 시작 쿠파스를 사용하기 위해 파이프라인을 알아보던 중 네이버 지식인을 선택하게 되었다 생각한 것은 질문이 올라오면 지정된 홍보문구로 답변을 하는 것. 하지만 질문이 생각보다 많이 올라오지 않았다 그래서 생각했다, 여태 올라온 질문은 크롤링해 내가 질문을 하면 되지 않을까? 2020년 12월 08일 시작합니다 2020년 12월 09일 네이버 지식인에 들어가서 질문을 크롤링하려고 한다. 지식인에 접속한 후 카페에서 많이 접했던 '노트북'키워드로 검색하여 검색 결과를 가져올 것이다. 크롤링하여 2777줄에 해당하는 정보를 얻을 수 있었다 홀수는 질문 제목, 짝수는 질문내용이니 질문의 개수는 1388개이다 마지막 한 줄은 개행 문자(\n)이다 얻은 질문들을 살펴보니 중복된 글이 많아 지.. 더보기 이전 1 2 다음