Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | |
7 | 8 | 9 | 10 | 11 | 12 | 13 |
14 | 15 | 16 | 17 | 18 | 19 | 20 |
21 | 22 | 23 | 24 | 25 | 26 | 27 |
28 | 29 | 30 | 31 |
Tags
- 백준
- SSAFY
- 알고리즘
- git
- Django
- 싸피셜
- vitepwa
- PWA
- 머신러닝종류
- queryset
- QuerySetAPI
- 싸피10기
- SSAFYcial
- Javascript
- TypeScript
- react
- Python
- SQL
- 플로이드워셜
- 데코레이터
- db
- VITE
- sqld
- 셀프넘버
- 14658
- 싸피
- pwa적용하기
- unionfind
- js
- 리액트
Archives
- Today
- Total
목록웹크롤링 (1)
Meme's IT
![](http://i1.daumcdn.net/thumb/C150x150/?fname=https://blog.kakaocdn.net/dn/FpwQA/btsyks3XlRu/ayi65y6GCLnhfkHcEkflr1/img.png)
# 웹 크롤링이란? 웹 페이지에 있는 정보를 가져오는 방법 중 하나로, 원하는 정보를 추출하는 스크래핑 + 웹 페이지를 자동으로 탐색하는 크롤링 = 웹 크롤링 즉, 웹 사이트들을 돌아다니며 필요한 데이터를 추출하여 활용할 수 있도록 자동화된 프로세스 # 웹 크롤링 프로세스 웹 페이지 다운로드: 해당 웹 페이지의 HTML, CSS, JavaScript 등의 코드를 가져오는 단계 페이지 파싱: 다운로드 받은 코드를 분석하고 필요한 데이터를 추출하는 단계 링크 추출 및 다른 페이지 탐색: 다른 링크를 추출하고, 다음 단계로 이동하여 원하는 데이터를 추출하는 단계 데이터 추출 및 저장: 분석 및 시각화에 사용하기 위해 데이터를 처리하고 저장하는 단계 # 실습해보기 1. 필수 라이브러리 설치 pip install..
BackEnd/Django
2023. 10. 13. 10:54