본문 바로가기

2020/11

(9)
( Python ) 지마켓 베스트 카테고리 - 상품명, 가격 중복 크롤링하기 오늘은 지마켓의 베스트 100 > 베스트 > 패션의류 카테고리의 상품명, 가격, 할인율 100개를 크롤링하는 예제 소스를 작성해 보도록 하겠습니다. 해당 페이지의 크롤링에서는 한번 크롤링한 데이터를 리스트에 담아 다시 크롤링하는 방법을 사용해야 합니다. 위의 소스보기 화면을 보면 div 태그의 class 속성 중에 best-list 가 2개가 존재하는 것을 알 수 있다. 이로 인해 상품명을 크롬 개발자 도구에서 CSS Selector를 이용하여 상품명을 크롤링을 할 수가 없습니다. 아래 code에서 best-list class를 모두 가져와서 그중 두 번째 class를 새로운 변수에 저장하고 bestitem 변수에 상품명이 있는 태그를 다시 저장합니다. import requests from bs4 imp..
실리콘밸리식 팀장 만들기 수업 - " 팀장의 탄생 " 몇 개월 만에 책을 읽는지 모르겠습니다. 오늘 오랜만에 리뷰 작성을 할 책은 페이스북 디자인 부사장이 작성한 " 팀장의 탄생 "이라는 책입니다. 작년에 근무했던 회사에서 취업사기당하여 멘털이 무너졌었고 그 뒤로 많은 생각을 했습니다. 과연 나는 문제가 없었을까? 내가 왜 그 회사에 가서 부적응을 겪여야 했으며, 이번에 내가 동일한 실수를 반복하지 않으려면 어떻게 행동하는 것이 과연 올바른 문제일까? 대해서 생각을 했습니다. 그리고 미래를 준비하기 위해 내가 매니저가 된다면 앞으로 어떻게 팀을 매니징 해야 하는가에 대해 공부를 하고 싶었습니다. ■ 팀장 승진 후 첫 3개월 무엇을 해야 하는가? 책에서는 팀장이 되는 유형을 4가지로 구분하고 있습니다. [ 수습생, 개척자, 신규부임자, 후계자 ]로 구분하고 ..
네이버 쇼핑 특정 카테고리 인기상품 Top 100 크롤링해서 엑셀파일에 저장하기 늦깎이 코딩 공부이지만 뭐든지 새로운 것을 알아간다는 것이 행복하다는 것을 최근 다시 깨닫고 있습니다. 파이썬을 이용해서 실무에서 데이터 분석도 할 줄 아는 PM이 되기 위해 노력 중입니다. 오늘은 네이버 쇼핑의 특정 카테고리의 인기 상품 Top 100의 상품명과 가격을 크롤링하여 엑셀에 저장하는 코드를 작성해 보았습니다. 물론 잔재미코딩님의 강의용 코드 소스를 기본으로 해서 네이버 쇼핑 사이트를 기준으로 연습을 해 본 것인데, 몇 번의 오류와 오타 수정을 통해 제가 원하는 데이터를 추출해서 엑셀에 저장할 수 있다는 것만으로도, 한 단계 발전한 느낌입니다. import openpyxl import requests from bs4 import BeautifulSoup def write_excel_templ..
가성비 좋은 듀오백 DQ-HLJA-C 컴퓨터의자 14일 실 사용기 맥북 컴퓨터 구입한 지 벌써 2년이 다 되어 가는데 이제야 컴퓨터 의자를 장만했습니다. PMP 자격증 공부할 때 책상에 앉아서 공부를 오랫동안 해 보니 의자의 중요성을 깨달았습니다. 시디즈 유아용 의자를 구입해서 큰 아이 초등학교 때 책상에 앉아서 공부하라고 구입한 의자인데 공부와 영 거리가 먼 우리 아이들은 사용 안 하고 제가 사용을 했습니다. 성인이 사용하기에는 작은 사이즈 의자라서 그동안 아쉬운 대로 사용을 했었는데, 결국 안 되겠다 싶어서 제대로 된 컴퓨터 의자를 구입하자 마음을 먹고 검색을 해 보았는데 최종 결정은 듀오백이었습니다. 포털 사이트에 검색해 보면 5만 원 정도에 가성비 좋은 의자도 많았으나 상품후기가 호불호가 너무 나뉘어서 그래도 AS 생각해서 17만 원 정도 주고 직접 구입을 했습..
Python - 네이버 Open API 를 이용해서 특정 키워드 뉴스 10개 가져오기 PMP를 공부하면서 원하는 자격증을 취득했다는 성취감도 좋았지만, 한 가지 더 좋았던 점은 공부하는 습관이 생겼다는 것입니다. PMP를 공부하면서 들었던 생각은 합격, 불합격 유무를 떠나 마음 편히 내가 하고 싶은 공부를 할 수 있는 것도 소소한 행복이구나 생각이 들었습니다. PMP 시험이후에 다시 코딩 공부를 시작하고 있습니다. Python을 공부해서 꼭 데이터 분석 기술은 습득할 것이다라는 목표와 Python을 실무에 꼭 사용할 수 있도록 할 것이다!!라는 것이 목표입니다. 오늘은 잔재미코딩님의 블로그에 접속해서 네이버 Open API 중 뉴스 API를 활용하여 특정 키워드에 대한 뉴스 기사를 10개까지 추출해 보는 연습문제였습니다. * 연습문제 네이버 오픈 API 사이트에서 특정 키워드로 검색 결과..
사계절 내내 가볼만 한 곳, 화담 숲에서 코로나로 지친 마음을 힐링하다!! 경기도 광주에 위치한 화담 숲은 2020년 올해 4월 초에 다녀왔습니다. 벌써 7개월 전이니, 그동안 얼마나 블로그 포스팅을 안 했었는지 반성을 해야 합니다. 여기 화담 숲도 대한민국에 이런 곳이 있나? 했을 정도로 모르고 있던 곳인데 지인 소개로 좋은 곳이 있다 하여, 평일날 찾아간 화담 숲이라 사람도 별로 없고 한적하게 숲길을 산책할 수 있었습니다. 화담 숲에 도착해서 놀랐던 것이, 규모가 엄청 커서 총 산책하는 소요시간이 1시간 30분 정도는 걸리겠더라구요. 곤지암 리조트 안에 위치한 화담 숲이라 스키장과 같이 위치해 있습니다. 주차장에 주차를 하고 화담 숲 매표소까지 5 ~ 7분 정도 걸어서 올라가셔야 합니다. 화담 숲에 도착하시면 모노레일을 운영하고 있는데요, 물론 모노레일 표를 끈지 않고 걸어..
PMP 취득을 위한 인강 사이트 여기를 강력히 추천합니다 ( 내돈내산 후기 ) 해당 포스팅을 원래 PMP 자격증 취득 후기 포스팅에 작성하려고 했는데, 화면 캡처하는 게 귀찮아서 그냥 대충 작성한 느낌이 있어서 올해 안으로 꼭 PMP 취득을 희망하시는 분들을 위해 내 돈 내산 후기를 작성해 볼까 합니다. 포털사이트에 PMP 자격증이라고 검색하시면 수많은 인강 사이트가 나옵니다. 그중에 어디서 강의를 듣고 PDU를 획득해야 할지? 그리고 시험공부에 최적화되어 있는 사이트는 어디일까? 고민을 많이 했는데 비용도 적당하고 PMP 합격후기가 제일 많아서 과감히 선택한 곳이 바로 ITPE ( www.itpe.co.kr/ )입니다. ITPE는 기술사, 감리사, PMP 자격증 취득을 위한 온라인 강의, 오프라인 강의를 제공하는 서비스입니다. 여기 대표님이 강정배 기술사님이라고 이베이코리아, 티..
가을여행 - 뮤지엄 산 ( 풍경이 모든걸 다 했다!!) 핸드폰 갤러리를 뒤적거리다 지난달에 가을여행으로 당일치기로 휙~~ 다녀온 " 뮤지엄 산 "을 포스팅해 볼까 합니다. 알고 지내는 지인 소개로 대한민국에 이런 카페가 있다는 사진을 받고 너무 이뻐서 한번 가야지 계획하고 있다가 코로나가 주춤해졌을 때 마스크 잘 쓰고 다녀온 곳입니다. 뮤지엄 산 ( http://www.museumsan.org/ ) 하늘과 마주 닿는 곳, 예술과 통하는 곳, 진정한 소통이 시작되는 곳... 이라는 모토로 자연의 품에서 문화와 예술의 울림을 만날 수 있는 전원형 뮤지엄입니다. 주소 : 강원도 원주시 지정면 오크밸리 2길 260 전화번호 : 033 - 730 - 9000 뮤지엄 산을 검색하여 찾아보니 카페가 아니라 미술관 이었는데요, 한솔 오크밸리 內 골프장 안쪽에 위치한 미술관..

반응형