웹 크롤링 관련 질문 드립니다. (구현 가능성에 대해..)4
- skqlai
- 등록일 2020-10-04 18:24
- 조회수 1069
|
||
0
추천하기
다른의견
0
파워링크 
등록안내
|
 0
 0
 만만이
컴공이시면 1주일이면 가능할 것 같은데요
2020-10-04
|
|
|
0
0
타짜0725
Good Luck!
2020-10-06
|
|
|
0
0
3월3일생
일반적으로는 BeautifulSoup를 많이 씁니다. 소스보기에서 보이는 것들을 크롤링 하니까, 여기까지는 그렇게 어렵지 않게 하실 것 같은데요.
대형쇼핑몰이라면 소스보기에서 보이지 않는 경우가 많아서, 이경우에는 브라우저 렌더링단계(?)에서 크롤링해야 하고 셀레니움을 가장 많이 쓰는 걸로 알고 있습니다. 이런 경우는 소스가 크롤링 쉽지 않도록 작정하고 만든 경우도 있어서, 직접 시도해봐야 난이도를 알 수 있을 것 같아요.
2020-10-08
|
|
|
|
 |
|
| △ 이전글▽ 다음글 | -목록보기 |
|
글쎄요.. 파이선은 다뤄보지 못해서 모르겠는데 한 사이트에 대해서 정보를 받는거면 규칙이 있으니 쭈욱 받아서 저장하면 될거 같은데요
크롤링 생각보다 쉽습니다 그냥 웹 클라이언트 가지고 막 퍼다 줏으면 되요