Notice
Recent Posts
Recent Comments
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | |
7 | 8 | 9 | 10 | 11 | 12 | 13 |
14 | 15 | 16 | 17 | 18 | 19 | 20 |
21 | 22 | 23 | 24 | 25 | 26 | 27 |
28 | 29 | 30 |
Tags
- github
- 더현대서울 맛집
- 편스토랑 우승상품
- gs25
- 파이썬
- 백준
- dacon
- 편스토랑
- Docker
- Kaggle
- 우분투
- programmers
- 프로그래머스 파이썬
- ubuntu
- 자연어처리
- Real or Not? NLP with Disaster Tweets
- hackerrank
- PYTHON
- 금융문자분석경진대회
- Git
- 캐치카페
- leetcode
- SW Expert Academy
- Baekjoon
- ChatGPT
- 프로그래머스
- AI 경진대회
- 맥북
- 코로나19
- 데이콘
Archives
- Today
- Total
목록
반응형
파이썬 슬랙봇 (1)
반응형
솜씨좋은장씨
[Python] Slack WebHooks 을 통해 작업 진행상황 알림 받아보기! (feat. Incoming WebHooks)
최근에 크롤링을 하면서 네이버 뉴스의 기사를 크롤링하고 그 크롤링한 데이터를 MariaDB에 insert하는데 워낙 크롤링하는 데이터의 개수가 많다보니 time.sleep(0.5) 의 0.5초 시간까지 더하여 24시간 ~ 30시간 정도가 소요되었습니다. 짧은 시간 크롤링이라면 그냥 크롤링이 진행되는 동안 지켜보면서 문제가 발생했을 때 대응할 수 있지만 많은 양의 데이터를 긴 시간 동안 크롤링할때는 중간중간 이동하는 시간이나 식사시간에 직접 일일이 확인할 수 없으니 뭔가 다른 루트를 통해 진행 과정이나 오류가나서 멈추거나 하는 것들을 확인하고 싶었습니다. 그러던 중 예전에 삼성 SOSCON 당시 케라스 코리아 밋업에서 들었던 내용중에 딥러닝의 학습과정을 Slack에 기록을 남겨 어디서든지 확인할 수 있도록..
Programming/Python
2020. 4. 24. 16:53
반응형