솜씨좋은장씨

제가 즐겨보는 Youtube B Man채널에서 제 최애 영화인 어벤져스 엔드게임의 영화 명장면을 정리한 어벤져스 엔드게임 명장면 총정리라는 영상의 댓글 가져오기를 해보았습니다. 인스타그램 크롤링 코드가 필요하신 분은 아래의 링크를 참고해주세요! [Python] Selenium을 활용하여 인스타그램 크롤링 하기! 이번 글에서는 Python과 Selenium을 활용하여 인스타그램 게시물을 크롤링하는 방법에 대해서 적어보려 합니다. 해당 코드를 활용하여 발생하는 문제는 코드 사용자에게 있음을 알려드립니다. 1. 필 somjang.tistory.com 1. requests와 BeautifulSoup를 활용하여 시도하기 처음에는 requests와 BeautifulSoup를 사용하여 댓글 가져오기를 시도했습니다. ..

1. 구글 크롬 최신으로 업데이트하기 먼저 크롬의 맨 우측 상단의 세 개의 점을 클릭하여 크롬의 설정페이지로 들어갑니다. 왼쪽 메뉴에서 Chrome 정보를 클릭하여 업데이트를 실시합니다. 다시시작을 클릭하여 업데이트를 완료합니다. 크롬의 버전을 기억합니다. 현재 이 글에서 크롬버전은 77.0.3865.75 입니다. 2. Selenium Chrome drirver 다운로드 아래의 링크로 이동하여 설치파일을 다운로드 받습니다. 2020년 확인결과 파일 다운로드 방법이 변경되어 다시 업데이트 하였습니다. SeleniumHQ Browser Automation If you want to create robust, browser-based regression automation suites and tests, sc..

공공데이터포털에서 제공하는 API를 처음 활용하고자 할 때 분명히 정상적인 과정으로 활용 승인 받고 얻은 API KEY임에도 불구하고 SERVICE KEY IS NOT REGISTERED ERROR가 발생하여 이 에러로 3일 넘게 혼자 끙끙 거리던 적이 있었다. 그렇게 몇 날 며칠 동안 방법을 찾은 결과 방법을 찾았다. 1. API KEY 인코딩 문제 공공데이터포털에서 제공하는 API KEY는 이미 인코딩이 되어있는 채로 제공이 됩니다. 따라서 API에 이 인코딩 되어있는 키로 데이터를 요청하게 되면 가차없이 SERVICE KEY IS NOT REGISTERED ERROR 에러를 선물해줍니다. 다음과 같은 방법으로 요청 전 API KEY를 디코딩 후 사용하여 이 문제를 해결할 수 있습니다. Python ..

1. 활용하게 된 계기 태풍이 오기 직전이었던 2019년 8월 11일 토요일 냉면투어를 위해 백령도로 향했던 필자는 태풍으로 인하여 예상치 못한 일에 봉착한 적이 있었습니다. 바로 태풍의 북상으로 인한 먼 바다 풍랑주의보로 인하여 선박 운항을 하지 않는다는!!!!!! 청천벽력과 같은 내용의 문자가 날아왔던 것입니다. 아니 이럴수가, 1박 2일로 짧게 계획 했던 여행은 그렇게 3박 4일의 긴 여행으로 변하였습니다. 여러 선박회사와 연안여객터미널로 연락하여 배가 출항하는지 여부를 확인하던 차에 머리에 스치고 갔던 것이 오픈 API였습니다. 미세먼지 정보를 알려주는 미세먼지 API처럼 선박 운항 관련 정보를 제공하는 API도 있지 않을까? 바로 공공데이터포털에 접속하여 검색하여보니 국제 및 연안 여객 터미널 ..

1. 공공데이터 포털 홈페이지 접속 공공데이터포털 국가에서 보유하고 있는 다양한 데이터를『공공데이터의 제공 및 이용 활성화에 관한 법률(제11956호)』에 따라 개방하여 국민들이 보다 쉽고 용이하게 공유•활용할 수 있도록 공공데이터(Dataset)와 Open API로 제공하는 사이트입니다. www.data.go.kr 위의 링크를 클릭하여 홈페이지에 접속합니다. 2. 회원가입하기 상단의 회원가입 버튼을 클릭하여 회원가입을 실시합니다. 회원가입을 완료하였으면 로그인을 실시합니다. 3. 필요한 API 검색하기 이 포스팅에서는 축산물 이력정보를 검색하고 신청해보겠습니다. 이 글을 보시는 분들께서는 희망하는 API를 검색하시기 바랍니다. 검색하면 나오는 페이지에 있는 목록 중에 오픈 API항목에서 희망하는 API..

이 글은 아래링크의 강의를 보고 공부했던 내용을 정리한 내용입니다. 내용은 아직 공부 초반이라 많이 부족합니다. 공부하면서 점점 보완하여 업데이트 하도록 하겠습니다. 딥러닝 입문에서 활용까지 케라스(Keras) | T아카데미 온라인강의 1. 딥러닝 레이어(Layer)에 대한 개념을 '블록'에 비유하여 설명한다. 2. 케라스를 이용한 MLP, CNN, RNN, GAN 모델링 방법에 대해 알아본다. tacademy.skplanet.com Model을 구성하는 Network, Objective Function, Optimizer Model을 크게 3가지로 나누어 본다면 Network / Objective Function / Optimizer 3가지로 볼 수 있습니다 이 세가지를 레고 사람 블럭 에 비유하면 N..

애플이 플러그인 사용을 권장하지 않으면서 Adobe Flash Player로 구성된 페이지는 아래와 같이 보일때가 있을겁니다. control키를 눌러 플러그인 실행을 눌러도 아무런 반응이 없어 정말 답답해 하던 차에 방법을 찾았습니다. 먼저 사파리를 실행하고 왼쪽 상단바에 Safari라고 써있는 곳을 클릭합니다. 클릭하면 나오는 메뉴에서 환경설정을 눌러줍니다. 웹사이트항목에서 왼쪽 메뉴 맨아래로 스크롤한 뒤 Adobe Flash Player에 체크하여 활성화 하고 현재 열려있는 웹사이트에서 Adobe Flash Player를 허용해줄 사이트 설정을 끔 -> 켬으로 변경해주시면 됩니다. 그럼 이상없이 잘 실행되는 것을 볼 수 있습니다. 위 글은 아래의 링크에서 정보를 얻어 만들었습니다. Mac용 Safar..

1. 제어판을 활용한 접근 작업표시줄의 돋보기 모양을 눌러 제어판을 눌러 실행합니다. 제어판에서 시스템 및 보안을 눌러줍니다. 시스템을 눌러줍니다. 고급 시스템 설정으로 들어가 환경변수를 눌러줍니다. 2. 단축키를 활용한 빠른 접근 Windows + R 버튼을 입력하여 실행창이 열리면 sysdm.cpl ,3 을 입력해주고 확인을 누르면 시스템 속성 창이 나옵니다. 여기서 sysdm.cpl^,3 sysdm.cpl하고 한칸 띄어쓴 다음 ,3 입력입니다. 여기서 환경변수 버튼을 클릭하면 접근할 수 있습니다.