Flask - nohup으로 백그라운드 실행하기

게시글

리눅스에서 파이썬 프로그램 작동시키기

리눅스에서 내가 만든 프로그램을 실행하는 방법입니다 프로그램 실행시키기 내가 만드 프로그램은 /home/monitor/monitor.py 파일입니다 파이썬3버전으로 업그레이드하면 python3 명령어로 실행 해야 합니다 $ cd /home/monitory $ python3 ./monitory.py 파일이 있는 경로로 이동하여 실행합니다 이때 백그라운드로 실행하기 위해서는 nohup를 사용합니다 $ nohup python3 monitor.py& 이렇게 입력하면 백그라운드로 실행이되기 때문에 터미널이 닫혀도 프로그램은 작동합니다 프로그램 중지시키기 프로세서명으로 종료하는 방법입니다 우선 프로세서가 실행 되고 있는지 파악하기위해 $ ps -ef | grep monitor 실행여부를 파악합니다 프로그램이 작동중이라면 monitor.py 프로세서가 있게 됩니다 이때 $ pkill -9 -ef monitor.py 명령어로 해당 프로그램을 중지시킬수 있습니다 프로그램이 오작동하여 중지될수도 아님 다른 문제가 발생될수가 있습니다 그래서 1시간에 한번씩 프로그램을 종료하고 다시 실행해주려 합니다 1시간에 한번씩 종료후 재실행하기위해서는 크론탭(crond) 활용하면됩니다 크론탭에 스케쥴 추가하기 $ vi /etc/crontab 아래와 같이 추가하면 정상적으로 작동하지 않습니다 59 * * * * root pkill -9 -ef monitor.py 0 * * * * root nohup python3 monitor.py& 이유는 nohup, python3 절대경로를 지정해 주지 않았기 때문입니다 종료 스크립트도 매시간 59:55초에 종료하고 00:00시에 다시 실행합니다 다시말해 종료후 5초후에 다시 실행해줘야 정상적으로 작동됩니다 그리고 monitor.py 파일을 실행할때 경로도 신경써야 합니다 monitory.py 안에 경로를 지정했을수도 있기 때문입니다 그래서 cd /home/monitor 디렉토리로 이동한 이후에 진행합니다 아래처럼 크론탭에 추가하면 정상작동합니다 59 * * * * root sleep 55;pkill -9 -ef monitor.py 0 * * * * root cd /home/monitor;/usr/bin/nohup /usr/bin/python3 monitor.py& 추가이후 $ systemctl restart crond 크론탭을 재실행 해주면 설정은 끝이 납니다

게시글

웹URL 주소로 캡쳐 하는 프로그램 만들어 보도록 하겠습니다

웹URL 주소로 캡쳐 하는 프로그램 만들어 보도록 하겠습니다 html2canvas 플러그인을 통해서 웹페이지를 캡쳐할수 있습니다 하지만 자신의 홈페이지에서만 가능 하지 다른 URL주소의 내용은 캡쳐할수 없는 단점이 있습니다 해서 URL주소를 입력하면 해당 주소의 내용을 캡쳐후 이미지로 반환해주는 프로그램을 만들어 보려합니다 작동원리 작업전 준비 작업 1)PHP 홈페이지 2)서브서버로 사용할 윈도우 PC 3)공유기 포트포워드 설정 (메인서버에서 가상아이피를 사용하는 서브서버로 접속하기 위함) 4)서브서버에 파이썬 설치 5)서브서버에 파이썬 flask 설치 6)서브서버에 파이썬 selenium 설치 위 순서대로 진행을 하려합니다 핵심은 메인서버에서 서브서버의 특정 프로그램을 실행 시켜주는 것입니다 일반적으로 웹상에서 다른 PC의 프로그램을 컨트롤 하기가 어렵습니다 처음 개발단계에서 웹소켓을 통해 프로그램을 컨트롤 하려 했습니다 실재로 http로는 컨트롤까지 되었습니다 그러나 홈페이지가 https인 경우 ws가 아닌 wss 웹소켓만 사용해야 하는 문제가 있어서 php file_get_contes() 함수와 flask서버를 사용해 컨트롤 하는 방법을 채택하였습니다 처음 계획이 수정되어 편법을 사용한 것이 아닌가 생각되었지만 flask 를 사용해보니 서브서버가 안정적으로 작동하여 오히려 더 나은 방법이라 판단됩니다 유튜브주소 https://www.youtube.com/watch?v=aCWmZplpts0 https://www.youtube.com/watch?v=iE1wAFZmR-w

비전공자를 위한 파이썬 자동화 완벽 가이드

wikidocs.net

비전공자를 위한 파이썬 자동화 완벽 가이드는 온라인 책 출판 플랫폼 위키독스(WikiDocs)에 무료로 공개된 전자책으로, 이제 막 파이썬을 시작한 초보자에게 파이썬으로 자동화할 수 있는 일들을 쉽게 알려주는 것을 목표로 합니다. 파이썬 설치와 Visual Studio Code 사용법 같은 환경 설정부터 마우스·키보드 제어와 이미지로 화면 좌표를 찾는 데스크톱 자동화, requests·BeautifulSoup·Selenium을 이용한 웹 스크래핑과 웹 자동화, 엑셀 다루기 같은 응용 예제까지 단계적으로 구성되어 있습니다. 프로그래밍을 전공하지 않았지만 반복 업무를 파이썬으로 줄여 보고 싶은 직장인과 입문자에게 유용합니다.

게시글

리눅스 서버 모니터링

리눅스 기본 명령어를 가지고 모니터링 프로그램을 만드는 방법입니다 작동원리는 1)크론탭을 이용해 1분에 한번씩 리눅스 기본명령어 pstree,df,top 등을 통해 서버 상태를 파일로 저장합니다 2)만들어진 파일을 외부 웹서버에 전송합니다. 3)웹서버에서 받은 내용을 가공해 챠트를 통해 표현해줍니다 프로그램은 monitor 폴더를 만들어 /home/monitor 에 위치 시켜줍니다 폴더내의 파일은 monitor.sh 파일만 존재합니다 파일생성후 chmod 757 monitor.sh 권한​을 부여합니다 크론탭에 1분에 한번씩 실행하도록 추가합니다 * * * * * root cd /home/monitor;sh monitor.sh 소스는 아래를 참고하시면 됩니다 간단히 소스 설명을 하자면 date > monitor_temp.txt 파일을 덮어쓰기합니다 echo '------------' >> monitor_temp.txt 파일끝에 추가합니다 monitor_txt=$(

파이썬 셀러리움 네이버 로그인프로그램

domdom.tistory.com

DOMDOM 블로그에 올라온 '[크롤링] Selenium으로 네이버 로그인하기 + 캡챠 우회' 글입니다. 파이썬 Selenium 라이브러리로 네이버 로그인 과정을 자동화하는 방법을 단계별로 설명합니다. 로그인 버튼을 CSS 클래스로 찾아 클릭하고, 아이디·비밀번호 입력칸을 id 속성으로 선택해 값을 넣은 뒤 로그인하는 흐름을 보여줍니다. 자동 입력 시 캡챠가 뜨는 문제는 pyperclip으로 클립보드에 복사한 값을 Ctrl+V로 붙여넣는 방식으로 피하는 방법을 소개합니다. 파이썬으로 로그인이 필요한 웹 크롤링을 연습하는 개발자에게 참고가 됩니다.

파이썬 작업표시줄 작은아이콘으로 감추는 기능

gogoonbuntu.tistory.com

'관종 개발자 고군분투' 블로그의 파이썬 윈도우 프로그램 만들기 글입니다. 업무 자동화용 윈도우 데스크톱 앱을 만들면서 프로그램을 작업표시줄 트레이의 작은 아이콘으로 두는 방법을 다룹니다. 시스템 트레이 아이콘과 우클릭 메뉴를 만드는 pystray, 창을 띄우는 tkinter 사용법을 예제와 함께 설명하고, 두 라이브러리가 모두 실행 흐름을 멈추기 때문에 스레드로 나눠 실행해야 한다는 점을 짚습니다. 파이썬으로 트레이에 상주하는 간단한 GUI 프로그램을 만들려는 개발자에게 참고가 됩니다.

미니PC 클라우드 서버 활용팁 BEST 3 (nextcloud 이렇게 써보세요) - You

www.youtube.com

유튜브 채널 '잇츠 매거진'의 영상 '미니PC 클라우드 서버 활용팁 BEST 3 (nextcloud 이렇게 써보세요)'다. 소형 미니PC에 오픈소스 클라우드 소프트웨어 Nextcloud를 설치해 개인용 클라우드 서버로 활용하는 방법을 다룬다. Nextcloud는 파일 저장·동기화와 공유 기능을 제공하는 자체 호스팅형 클라우드로, 영상은 미니PC로 구축한 Nextcloud 서버를 더 유용하게 쓰는 활용 팁 세 가지를 소개한다. 유료 클라우드 저장소 대신 집에서 직접 개인 클라우드나 홈서버를 운영해 보고 싶은 사용자에게 참고가 된다.

게시글

네이버에서 환율시세 크롤링해서 활용하기(2)

네이버의 환율 정보를 크롤링 하는 프로그램입니다 php 로 작업 되어 있으며 새로 고침 할때만 크롤링 되는 문제를 해결하기 위해 리눅스 크론탭을 활용하였습니다 크론탭은 스케쥴 관련 데몬으로 특정 시간에 프로그램이 작동되게 해주는 데몬입니다 크론에서 다이렉트로 php 파일을 실행하면 좋겠지만 실행되지 않아 크론에서는 쉘스크립트를 실행해주고 쉘스크립트에서는 php 파일을 실행시켜주는 형태로 작업이 되어 있습니다 작업전 준비 작업 입니다 -환율 정보를 가져올수 있는 페이지 https://finance.naver.com/marketindex/exchangeDetail.naver?marketindexCd=FX_USDKRW 주소 내에 iframe 형태로 일별시세페이지가 존재함 https://finance.naver.com/marketindex/exchangeDailyQuote.naver?marketindexCd=FX_USDKRW&page=1 해당주소에서 크롤링함 -외부환율 정보를 크롤링할 php 파일작업 -php 파일을 실행할수 있는 sh 스크립트파일 작업 -cron에 sh(쉘스크립트) 실행 스케줄 추가