David의 개발 이야기!

코인원 사이트에서, 그래프에 있는 종가 혹은, 주가 정보를 가져오고 싶다면 어떻게 해야할까? 우선 크롬 개발자도구 > 네트워크 탭에 들어간다. 그 후, 주가창을 이리저리 옮겼을때 네트워크 탭에 뜨는 무언가(?site=coinone&typpe=1d) 를 클릭해서 url 을 딴다. 해당 url 을 크롬에 복사 붙여넣기를 하면, 이런식으로 정보가 뜨는 것을 확인할 수 있다. DT는 시간, open 시작가격, close 는 종가 등 정보들을 가져올 수 있다. 이를 VS code에서 확인하면, (우클릭 format-document) 를 클릭하면 다음과 같이 확인할 수 있다. 이제, 해당 정보를 불러와서 작업할 수 있는 baseline 코드를 만들어보자 import json import requests import..

크롤링을 하려다가 보면, 페이지가 넘어가야하는 부분들을 처리해야 할 때가 있다. 크게 두가지 종류로 나눌 수 있는데, 1. 페이지 넘버로 구분되어있을때 2. 스크롤을 계속해서 로딩을 계속 해주어야할때 로 나뉜다. 1. 페이지넘버로 구분되어있을때의 크롤링 방식 1번같은 예시는, 쿠팡처럼 쇼핑몰 같은데에서 잘 구현되어있다. 1번 같은 경우는 https://www.coupang.com/np/search?q=%EC%82%AC%EA%B3%BC&channel=user&component=&eventCategory=SRP&trcid=&traid=&sorter=scoreDesc&minPrice=&maxPrice=&priceRange=&filterType=&listSize=36&filter=&isPriceRange=fal..

데이터마이닝 수업을 수강하며, 크롤링의 필요성을 다시 한번 느끼게 되어, 정리겸 공부할겸 포스팅을 하게 되었다. 인공지능수업이나, 데이터분석 수업을 수강하는 대학생이라면, 아마도, 데이터수집의 어려움을 겪을 텐데, 크롤링을 할줄 안다면, 큰 도움이 될 것이다. 단계별로 하나하나씩 진행하며, 포스팅을 해볼 예정이니, 뒷 내용까지 함께 봐보자! 1. 네이버 주식 현재가 크롤링 https://finance.naver.com/item/sise.naver?code=005930 네이버 증권페이지에서, 주가를 뽑아와 txt 파일에 저장하는 예제이다. 1-1 기본 코드 알아야할 모듈과 함수 1. requests : html 코드를 가져온다. 2. bs4 : html 코드를 가져와서 예쁘게(인간눈에) 바꿔준다 3. .c..

이 글을 보는 독자분들은 아마, 필자는 누구이며, 라피신에는 어떤 마음가짐으로 임했고, 라피신 생활은 어떠한지, 그리고 어떻게 하면 합격을 하는지가 궁금해 할것으로 생각되어 해당 flow대로 글을 써보려고 한다. 이야기가 길어져서,  1, 2, 3은 다른 글에 작성하였다. 1. 라피신 참가전 필자의 상황2. 필자는 누구인가 3. 라피신의 생활은?4. 지나고 나서 보니 이렇게 하면 합격하는 것 같더라5. 중요한 포인트들6. 필자의 라피신 기록  https://david-kim2028.tistory.com/entry/42%EC%84%9C%EC%9A%B8-9%EA%B8%B0-%EB%9D%BC%ED%94%BC%EC%8B%A0-%ED%9B%84%EA%B8%B0 42서울 9기 라피신 후기이 글을 보는 독자분들은 아..

이 글을 보는 독자분들은 아마, 필자는 누구이며, 라피신에는 어떤 마음가짐으로 임했고, 라피신 생활은 어떠한지, 그리고 어떻게 하면 합격을 하는지가 궁금해 할것으로 생각되어 해당 flow대로 글을 써보려고 한다. 이야기가 길어져서, 4, 5번은 다음글에 이어서 썼다.  1. 라피신 참가전 필자의 상황 2. 필자는 누구인가 3. 라피신의 생활은?4. 지나고 나서 보니 이렇게 하면 합격하는 것 같더라5. 중요한 포인트들 6. 필자의 라피신 기록들(성적, 시간등)   [ 1. 라피신 참가 전 필자의 상황 ]42서울 9기는 크게 1, 2차 나뉘어서 선발했는데, 필자는 9기 2차에 참여했다. 42서울이 처음 생겼을때, 바로 온라인테스트를 봤던 터라, 체크인미팅만 할 준비를 했었는데, 높은 경쟁률로 신청을 하지 못..

1. 부모 state를 자식이 수정하려면? 1. 부모에 수정함수 만들기 2. 자식으로 보내기 2. Input data 다루기 -> 유저가 입력한 데이터를 변수에 담자 : controller 방법 1 - controller 사용 방법 2 - onchanged 사용