목록크롤링 (6)
GOOD4ME

야후 파이낸스에서 크롤링 테스트를 마치고, 적재가 잘 되는지 확인하기 위해 평일마다 크롤링 모듈을 돌려보았다. 지난주 금요일(2022-11-18), 여느 날처럼 퇴근 후, 크롤링 모듈을 돌려보았는데 아래처럼 갑자기 오류가 발생한다❓❓❓ ... ValueError: not enough values to unpack (expected 2, got 1) ~ ... 문제 파악 2개의 값을 예상하였으나, 1개의 값만 가져와서 발생한 것으로 추정되는데... find_element_by_xpath() 함수로 특정 element의 값을 가져온 후, 특정 문자를 기준으로 split()시켜, 두 변수에 따로 담게 해놨으니 에러의 이유는 납득이 간다. 그래서 그 부분을 직접 출력해보았으나, 공백으로 출력이 된다❓❓ 아니 뭐..

프롤로그 더보기 많은 사람들이 주식 분석과 주가에 대한 예측에 대해 관심이 많을 것으로 생각한다. 방대한 양의 과거 데이터가 축적되어있다면, 이를 분석하여 해당 종목에 투자할만한 가치와 시점 등을 어느정도 파악하여 분석이 가능할 것으로 본다. 물론 정확한 주가 예측은 불가능하겠지만:) 해외 주식 분석과 트렌드 파악을 하기 위해 데이터가 필요하다. 필자는 해외 주식 데이터를 수집 및 축적하기 위한 작업의 계획을 기술한다. 목표 해외주식 데이터 수집이 가능한 웹 선정 웹으로부터 크롤링할 데이터 선정 크롤링 시각 선정 크롤링 데이터 적재 프레임워크 선정 크롤링할 웹은? 👉 https://finance.yahoo.com/ 요즘 저작권법이 중요해진만큼 크롤링할 웹이 크롤링이 가능한지 확인해야한다. 이를 위해, 웹..