데이터를 기반으로

여느 날과 같이 집에서 저녁을 먹다가 와이프가 갑자기 나에게 한가지를 물어보았다. "자기야 특정 뉴스 매일 카톡으로 오면 좋겠는데 그런 기능은 없어?" 자존심으로 똘똘뭉친 나는 "아니? 그런게 왜 없어 당연히 있지 내가 만들어줄게!" 라고 호언 장담하였다. 그렇게... 해당 서비스는 제 와이프의 요청으로 인해서 구축하게 되었습니다. (이상 배경 설명 끝) 먼저, 이전에 설명한 Naver News API 를 먼저 참고하고 오시면 좋을 것 같다. https://ds92.tistory.com/139 네이버 뉴스 API 정리 특정 키워드 관련 뉴스들을 모니터링 하기 위해 네이버 api 로 뉴스를 가져오는 방법을 소개하고자 한다. https://developers.naver.com/main/ NAVER Devel..

특정 키워드 관련 뉴스들을 모니터링 하기 위해 네이버 api 로 뉴스를 가져오는 방법을 소개하고자 한다. https://developers.naver.com/main/ NAVER Developers 네이버 오픈 API들을 활용해 개발자들이 다양한 애플리케이션을 개발할 수 있도록 API 가이드와 SDK를 제공합니다. 제공중인 오픈 API에는 네이버 로그인, 검색, 단축URL, 캡차를 비롯 기계번역, 음 developers.naver.com 가장 먼저 할 일은 네이버에서 api 를 신청하는 것이다. 상기 페이지를 접속하면 뉴스 api 뿐만 아니라 다양한 기능들을 제공하는 걸 확인할 수 있다. 신청 방법은 구글에 굉장히 많은 자료들이 존재하기에 간단하게 말씀드리고 넘어가겠습니다. 신청해야할 api는 "검색" ..

크롤링을 할 때 마다 가장 불편했던 부분은 Html 에 대한 개념이 부족할 때 구조 파악이 잘 안되는 부분들이었다. 그리하여, 이번에는 Html이 정확이 무엇인지? 그리고 어떤 구조로 구성되어 있는지 한번 알아보고자 한다. [ HTML 이란? ] 하이퍼 텍스트 마크업(Hyper Text Markup Language, HTML)란? 웹 페이지 표시를 위해 개발된 지배적인 마크업 언어다. 또한, HTML은 제목, 단락, 목록 등과 같은 본문을 위한 구조적 의미를 나타내는 것뿐만 아니라 링크, 인용과 그 밖의 항목으로 구조적 문서를 만들 수 있는 방법을 제공한다. 그리고 이미지와 객체를 내장하여 대화형 양식을 생성하는 데 사용될 수 있다. HTML은 웹 페이지 콘텐츠 안의 꺾쇠 괄호에 둘러싸인 "태그"로 되어..

안녕하세요~~ 오늘은 공공 데이터 포털에 올라와 있는 심평원 약국 현황 데이터를 받아오려고 합니다!! 저번에 올렸던 글은 T-map API 였는데요!! 그건 Json으로 받아왔지만 이번 건 XML 형식으로 받아오는 걸로 진행해보고자 해요!! 그리고 그땐 그냥 print로 제가 원하는 값 추출해서 보는 게 다 였지만!! 이번 건은 필요데이터를 받아 엑셀로 저장하는 것 까지 해볼 생각입니다!!!! 크게 어렵지 않아요!! ㅎㅎ 자! 그럼 먼저 공공데이터 포털에 들어가서 확인을 해봐야겠죠? https://www.data.go.kr/data/15001673/openapi.do 위 주소는 공공데이터 포털의 전국 약국 현황 조회 서비스 Open API 제공 사이트 입니다!! 페이지에 가셔서 가장 먼저 해야할 것은 참..

안녕하세요~~ 오늘은 !!! T-map API 파이썬으로 호출하기를 해보려고 합니다!! 요즘은 API가 활성화 되어서 특정 언어로 API 호출해서 데이터를 받아오는 건 기본 중 기본이 되어가고 있네요... 전 정말 처음엔 어렵게 블로그들 보면서 겨우 겨우 하고 그랬는데 지금은 한번 짜 놓은 코드 덕분에 수워할게 업무를 진행하고 있습니다~!! 먼저 API 호출 방식은 크게 2가지로 나뉩니다. XML 형식과 Json 형식으로 나뉘는데 각각 크게 차이는 없는 것같아요 파이썬에서는 그냥 호출하고 받아오고 파싱하는 과정에서의 명령어들이 조금씩 다른 정도로 보여집니다.(전적으로 데이터 추출 관점) 저는 Json 방식으로 진행을 했습니다 ㅎㅎㅎ 자 그럼 본격적으로 시작에 앞서!! 무료인 T-map API 에서 회원가..