파이썬 ChatGPT 로 네이버 IT 뉴스 페이징 웹 크롤링 스크래핑 개발
네이버 IT 뉴스 를 페이징하여, 스크래핑하기 (웹 크롤링) 지금까지 개발한 네이버 뉴스는 페이징에 대한 부분이 포함되어 있지 않았습니다. 네이버의 각 카테고리별 뉴스는 시간이 지나면서 페이징이 되는 데, 이전의 뉴스까지 스크래핑을 하려면 페이징을 할 수 있는 기능이 추가되어야 합니다. 아래의 네이버 뉴스 화면에서 2페이지를 누르면, 페이지 번호가 들어간 링크(URL) 를 확인할 수 있습니다. 이 링크를 이용하여, ChatGPT 에게 파이썬 코드를 알려달라고 하겠습니다. 이 포스트에서 개발할 사항은 오늘의 IT/과학 카테고리 뉴스에서 1페이지~5페이지 뉴스에 대한 정보를 스크래핑하는 것입니다. 네이버 뉴스 IT/과학의 IT 일반 뉴스 (하단부에 페이지가 있음) 네이버 뉴스의 html 중 각 뉴스에 해당하..
ChatGPT 와 파이썬
2023. 5. 16. 19:20
