파이썬 썸네일형 리스트형 [문과 파이썬 학습] 파이썬으로 기사 자동 요약하기 #1 Financial Times 기사 요약하기 이번 시간에는 Financial times 기사를 요약하는 코드를 짜 볼 예정이다.이 과정에서 BeautifulSoup으로 할지, Selenium으로 할지 고민이 될 수 있다. 결론부터 말하자면, 로그인된 상태에서 FT 웹사이트의 뉴스 기사를 스크래핑할 때는 Selenium이 가장 적합한 선택이다. BeautifulSoup도 충분히 유용하지만, 로그인 세션과 동적 콘텐츠 처리에 있어서는 Selenium의 편의성이 더 높다.로그인된 상태에서의 스크래핑(이 경우 Selenium이 유리)이미 로그인된 상태에서 스크래핑을 한다면, 유료 구독 및 로그인 문제는 발생하지 않음로그인 세션을 유지한 채로 스크래핑할 수 있어 별도의 쿠키 처리 과정이 필요 없음.동적 콘텐츠도 스.. 더보기 [문과 파이썬 학습] Beautiful Soup 과 Selenium 차이 Beautiful Soup과 Selenium은 웹사이트에서 정보를 가져오는 두 가지 도구임. 이 두 가지는 서로 다른 방식으로 동작하며, 각각의 장단점이 있음.차이점 쉽게 설명:Beautiful Soup:웹페이지에서 **"HTML 파일"**을 읽어와서 원하는 정보를 찾아주는 도구임.웹사이트가 한 번에 다 로드되는 정적(Static) 페이지에 적합.예를 들어, 신문 기사처럼 페이지가 한 번에 다 뜨는 사이트에서 특정 부분의 텍스트를 추출할 때 사용.Selenium:실제 웹 브라우저(크롬, 파이어폭스 등)를 자동으로 열고, 사람이 하는 것처럼 페이지를 조작해주는 도구임.동적(Dynamic) 페이지, 즉 버튼을 누르거나 스크롤을 해야 더 많은 정보를 보여주는 웹사이트에 적합.예를 들어, 쇼핑몰에서 계속 스크롤.. 더보기 이전 1 다음