TOP 분류 전체보기123 [ep01:웹크롤링] #18 오류 무시/예외 처리(Try/Except) with 파이썬 [왕초보 웹크롤링 무작정 따라하기] 웹크롤링, 셀레니움, 오류 무시, 오류 예외 만들기, Try, Except, Exception. 업무지옥을 탈출한 건에 대하여(feat.업무자동화) #18 오류 무시/예외 처리(Try/Except) Try / Except 사용하기 (바로가기 Click) 인스타그램(동적페이지)를 크롤링하기 위해 필수적인 코드들을 익혔다. 만들어둔 동작 자동화 코드에 .find 와 .text 메소드를 사용해 텍스트를 추출하면 된다. 브라우저 개발자 도구에서 경로를 추출하고 추출할 데이터에 맞게 수정해 코드에 넣어주었다. (브라우저 개발자도구에서 경로 파악하는 과정 생략) #라이브러리 활성화 import time from selenium import webdriver from seleniu.. 2021. 8. 12. [ep01:웹크롤링] #17 셀레니움 로딩될 때까지 시간/조건 설정하기 with 파이썬 a[왕초보 웹크롤링 무작정 따라하기] 웹크롤링, 셀레니움, 시간 조절, 대기시간, 동작 조건, implicitly_wait, WebDriverWait 업무지옥을 탈출한 건에 대하여(feat.업무자동화) #17 셀레니움 동작시간/조건 설정하기 implicitily_wait와expected_conditions (바로가기 Click) 인스타그램 크롤링 코드에 적용해보기 (바로가기 Click) 요소와 좌표를 사용하여 동작을 실행하고, 스크롤을 자유자제로 조종할 수 있게 되었다. 하지만 여기서 한 가지만 더 익힌다면 크롤링의 효율을 극대화 할 수 있다. 극대화의 기준 '시간'이다. time_sleep()으로 고정적인 시간을 대기하는 것은 매우 비효율적이다. 페이지가 로딩되어도 지정된 시간을 채워야 하고, 지정된 .. 2021. 8. 5. 마케팅 석사 세부전공, 수업 과목에 대하여(feat. OT) 마케팅 석사 세부전공, 수업과목에 대하여(feat. OT) 마케팅 세부 연구분야 (바로가기 Click) 수업 과목과 학기별 수강계획 (바로가기 Click) 나름 기다리던(?) 대학원 오티, 아무것도 모르는 석사 입학생들에게 세부전공과 수업과목 등에 대해 알려주고 서로 가볍게 인사하는 매우 고마운 자리였다. 오티에 교수님들은 참석하지 않으셨지만 조교인 석박사 과정 선배분들이 이런저런 설명과 질문에 답변해주셨다. 첫 순서로는 교수님들에 대한 소개였다. 어떤 분야를 연구하시고 어떤 수업을 하는지에 대한 것이었다. 그다음 세부 전공에 따른 수업 선택이었는데, 서강대 마케팅 석사는 크게 3가지 분야로 나눈다고 했다. 세부 연구분야 첫 째, 소비자행동(CB, Customer Behavior) 둘째, 퀀트(Quant.. 2021. 8. 4. [ep01:웹크롤링] #16 셀레니움 스크롤 조절하기 with 파이썬 [왕초보 웹크롤링 따라하기] 웹 제어, 브라우저 크기 설정, 셀레니움, Selenium, 스크롤 내리기, 스크롤 끝까지 내리기, 스크롤 위치 확인, 스크롤 단계별 내리기 업무지옥을 탈출한 건에 대하여(feat.업무자동화) #16 인스타그램 로그인하기(브라우저 크기 설정/셀레니움) 스크롤 내리기 반복문 (바로가기 Click) 인스타그램 피드 전체 마우스 오버하기 (바로가기 Click) 이제 스크롤을 제어할 차례다. 이 것만 익힌다면 브라우저에서 할 수 있는 동작은 대부분 익힌 것이나 다름없다. 이전 스크롤을 지정 위치까지 내리는 것은 해봤으니 단계적으로 내리거나 끝까지 내리는 방법을 알아보자. 스크롤을 움직이는데 필요한 자바스크립 코드는 특별할 게 없다. 단지 반복문을 사용할 뿐이다. # 현재 스크롤 전체.. 2021. 8. 3. [ep01:웹크롤링] #15 셀레니움 절대좌표/상대좌표 활용하기 with 파이썬 [왕초보 웹크롤링 무작정 따라하기] 웹크롤링, 셀레니움, 절대좌표, 상대좌표, 요소위치 확인, 자바스크립트 사용 업무지옥을 탈출한 건에 대하여(feat.업무자동화) #15 셀레니움 절대좌표/상대좌표 활용하기 요소의 절대 좌표 확인하기 (바로가기 Click) 상대 좌표 활용하기 (바로가기 Click) 대표적인 동적페이지라고 할 수 있는 인스타그램 크롤링에 성공했다! 하지만 아직 나는 목마르다. 최근 게시물 뿐만 아니라 전체 피드의 데이터를 크롤링하고 싶다. 하지만 그러기 위해서는 몇가지 문제를 해결해야 한다. 바로 스크롤에 따른 데이터의 변화다. 인스타그램의 html을 확인해보면 스크롤을 내리는 것에 따라 경로가 갱신되며 경로가 늘었다 줄었다 한다. 동일한 경로임에도 데이터가 달라지기도 한다. 이 문제를 .. 2021. 8. 2. [기관 제안서] 폴리텍 제안서 [기관 제안서] 폴리텍 제안서*본 게시물은 비공개 정보 노출을 방지하기 위해 사진/내용 등을 수정 및 가림 처리하여 업로드하였습니다.작업 소요시간 : 3일총 분량 : 10장폴리텍의 교육과정을 소개하는 소개서 작업이었는데요. 페이지 당 내용이 간결했기에 ppt가 너무 휑해보이지 않게 하는데 집중했던 프로젝트에요. 여백을 커버하기 위해 폴리텍의 로고를 모티프로 밀도를 높이는 동시에 아이덴티티까지 녹이는 방법으로 제작했답니다! [ 작업 의뢰 안내 ] 개인 의뢰를 종료하였습니다. 회사소개서/제안서/포트폴리오 외주 제작이 필요하신 분들은 '윤피티연구소'를 통해 문의해 주세요 :)윤피티 연구소- 홈페이지: https://yptlab.com/- 블로그: https://blog.naver.com/rimiy 2021. 7. 25. 이전 1 ··· 14 15 16 17 18 19 20 21 다음
