Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
Tags
- 스트림셋이란?
- 데이터베이스
- 도커 시작하기
- MySQL
- 정보처리기사
- java
- mysql docker
- streamsets 강의
- 도커
- C언어
- docker
- python
- c
- 도커 mysql
- 파이썬
- 데이트
- mysql on docker
- 도커 elk
- 앤서블 설치
- c++
- ansible install
- 푸시푸시
- 코딩
- 클라우드
- 알고리즘
- 자바
- nvidia docker
- elk stack
- 백준
- 스트림셋
Archives
- Today
- Total
목록파이썬 코드 초단위 (1)
리그캣의 개발놀이터
파이썬 파일을 초단위로 자동 실행(Crontab seconds 단위)
현재 실시간 데이터를 크롤링해서 저장하는 작업중인데 문제가 발견했다. 1. 해당 크롤링은 일정시간에만 작동하여야 한다.( ex 9시 10분 부터 18시) 2. 클로링 파이썬 코드는 초마다 작동하여야 한다. ( ex 2초마다) 먼저 crontab을 두개를 만들어 1번 문제는 해결 완료!! */1 10-15 * * * 10-59 9 * * * */1 10-15 * * * < - 10시부터 15시까지 매분마다 실행 10-59 9 * * * 해당 shell script 실행 flow를 만들어서 매 5초마다 크롤링 가능한 환경을 구축하였다.
프로그래밍 기본/서버 구축 및 관리
2019. 5. 8. 14:47