키워드 추출 프로그램

본문 요약 프로그램

velog.io

velog에 올라온 '[파이썬] TextRank(텍스트랭크)란.. 간단하게 사용해보기' 글입니다. 긴 글에서 중요한 문장을 골라 요약하는 TextRank 알고리즘의 개념과 파이썬 사용법을 소개합니다. 요약을 기존 문장을 뽑는 추출적 요약과 새 문장을 만드는 추상적 요약으로 나눠 설명하고, 구글 PageRank를 텍스트에 적용해 서로 많이 연결된 문장에 높은 점수를 주는 원리를 다룹니다. gensim의 summarize() 함수로 ratio 값을 바꿔 가며 한국어 단편소설을 요약해 봅니다. 파이썬으로 본문 요약 프로그램을 만들어 보려는 자연어처리 입문자에게 참고가 됩니다.

파이썬 셀러리움 네이버 로그인프로그램

domdom.tistory.com

DOMDOM 블로그에 올라온 '[크롤링] Selenium으로 네이버 로그인하기 + 캡챠 우회' 글입니다. 파이썬 Selenium 라이브러리로 네이버 로그인 과정을 자동화하는 방법을 단계별로 설명합니다. 로그인 버튼을 CSS 클래스로 찾아 클릭하고, 아이디·비밀번호 입력칸을 id 속성으로 선택해 값을 넣은 뒤 로그인하는 흐름을 보여줍니다. 자동 입력 시 캡챠가 뜨는 문제는 pyperclip으로 클립보드에 복사한 값을 Ctrl+V로 붙여넣는 방식으로 피하는 방법을 소개합니다. 파이썬으로 로그인이 필요한 웹 크롤링을 연습하는 개발자에게 참고가 됩니다.

게시글

네이버에서 환율시세 크롤링해서 활용하기(2)

네이버의 환율 정보를 크롤링 하는 프로그램입니다 php 로 작업 되어 있으며 새로 고침 할때만 크롤링 되는 문제를 해결하기 위해 리눅스 크론탭을 활용하였습니다 크론탭은 스케쥴 관련 데몬으로 특정 시간에 프로그램이 작동되게 해주는 데몬입니다 크론에서 다이렉트로 php 파일을 실행하면 좋겠지만 실행되지 않아 크론에서는 쉘스크립트를 실행해주고 쉘스크립트에서는 php 파일을 실행시켜주는 형태로 작업이 되어 있습니다 작업전 준비 작업 입니다 -환율 정보를 가져올수 있는 페이지 https://finance.naver.com/marketindex/exchangeDetail.naver?marketindexCd=FX_USDKRW 주소 내에 iframe 형태로 일별시세페이지가 존재함 https://finance.naver.com/marketindex/exchangeDailyQuote.naver?marketindexCd=FX_USDKRW&page=1 해당주소에서 크롤링함 -외부환율 정보를 크롤링할 php 파일작업 -php 파일을 실행할수 있는 sh 스크립트파일 작업 -cron에 sh(쉘스크립트) 실행 스케줄 추가

게시글

네이버에서 환율시세 크롤링해서 활용하기(1)

프로그램 개발할때 환율 정보가 필요할 때가 있습니다 이때 활용하는 방법입니다 네이버의 환율정보를 PHP로 크롤링해 mysql에 입력하는 방법입니다 동작원리는 외부에 있는 환율정보 페이지를 반복적으로 리다이렉트해 크롤링하여 입력하는 로직입니다 크롤링주소 https://finance.naver.com/marketindex/exchangeDailyQuote.naver?marketindexCd=FX_USDKRW&page=1

블로그차트

www.blogchart.co.kr

https://www.blogchart.co.kr 실시간으로 블로그의 순위를 분석해 영향력을 알아보는 블로그차트의 홈페이지입니다. 이 사이트에서 제공해주는 정보를 이용해 블로그 마케팅을 기획해 볼 수 있습니다. 별로 영향력이 없는 블로거보다는 영향력이 있는 사람을 통해 광고를 진행하는 것이 광고주 입장에서는 당연히 훨씬 더 좋은 효과를 올릴 수 있겠지요. 그런 정보를 체크해 볼 수 있다는 점이 이 사이트의 장점입니다. 사이트에 따르면 현재 블로그는 총 2천만 개가 넘게 존재한다고 합니다. 상당한 숫자인데 그 중 과연 내가 주목하는 블로그가 얼마나 유의미한 블로그인지 알아볼 수 있다는 거죠. 그 외 테마차트나 체험단 마케팅 같은 것도 찾아볼 수 있고요. 순위 급상승 차트를 따로 분석해서 지금 가장 핫한 이슈가 무엇인지 조사할 수 있기도 합니다. 저도 대략 살펴보니 블로그는 네이버가 압도적이네요. 75.9%를 차지하고 있네요. 그 다음이 다음 블로그이고, 티스토리, 이글루스 등이 그 뒤를 잇고 있습니다. 카테고리 별로 찾아보면 여행/숙박이 17.2%로 가장 인기가 많은 카테고리 중 하나이고 레시피나 맛집 등도 여전히 조회수를 올릴 수 있는 인기 콘텐츠가 될 겁니다. 많은 것 같은 영화 관련 블로그 순위가 의외로 적네요. '기타'라는 카테고리가 실은 31.8%로 1위이니 여기 들어가나 봅니다.

웨어이즈포스트

whereispost.com

http://whereispost.com 블로그 검색 노출 누락 여부를 알아볼 수 있는 '웨어이즈포스트'의 홈페이지입니다. 사실 예전에 네이버 블로그 이용자들이 한참 '순수한 마음'으로 네이버 블로그를 수익 기대 없이 운영하다가 한참 빠져나간 적이 있어요. 똑같은 포스팅을 제공하는데 다른 블로그 사이트 운영자들은 돈을 벌고, 네이버 블로그 이용자들은 돈을 못 번다는 사실이 알려지면서 생긴 대탈출 소동이었죠. 이후 네이버도 애드센스 허용 등으로 블로그 수익화의 길을 결국 열긴 열었지만 상당한 비중으로 떠나가긴 했습니다. 그래도, 요새 보면 개방 이후 SNS 마케팅 중에서도 특히 블로그 마케팅의 파워가 여전하다는 점이 느껴지긴 합니다. 자기가 직접 안 써도 글을 제공해 줄 테니 업로드만 해 달라는 제안들, 즉 SNS마케팅 업체에서 블로거들에게 제안하는 경우도 꽤 많기는 합니다. 하지만, 역시 중요한 것은 블로그 접속자 수의 유지겠지요? 내가 쓴 글들이 검색에서 노출되지 않고 있다면 얼마나 마음이 아플까요? 생각만 해도 안타깝습니다. '웨어이즈포스트'는 노출 누락 확인 뿐 아니라 키워드, 셀러 분석, 스토어 판매량 분석, 샘플 키워드 분석 등으로 블로그의 인기도를 아주 잘 확인해주는 사이트입니다. 온라인 마케팅에 관심이 있는 분이라면, 당연히 숙지해야 할 사이트이겠죠?

핫플리브

blog.naver.com

https://blog.naver.com/princess02 네이버 블로그 '핫플리뷰'입니다. 여기저기 많은 곳들 다니시면서 접하는 거의 모든 것들을 리뷰로 남겨주시고 계십니다. 그만큼 생활정보가 정말 많아서 하나씩 살피다 보면 재미가 쏠쏠하네요. 맛집 리뷰나 새로운 신제품 소개 등 하나씩 보다 보면 좋은 팁을 얻어가는 느낌까지 듭니다. 전체적으로 글이 2010개나 있습니다. 생활수준이 좋아지면서 맛집들도 점점 인기가 많아지고 있는데요. 특히 요새 같은 경우는 맛집을 다니는 방송 프로그램도 정말 많아졌고 유튜버들도 좋은 곳을 많이 다니면서 소개해 주고 있습니다. 그러다 보니 맛집마다 대기 줄도 많이 길어져서 맛있는 곳이다 하면 최소 30분에서 길게는 2시간 정도까지도 웨이팅이 생기는 시대입니다. 그만큼 리뷰가 중요하다는 뜻인데요. 물론 블로그 주인님의 개인적인 감상에 불과할 수도 있지만 그래도 그런 걸 하나씩 읽다 보면 더 재미있기도 하고요. 글도 꽤 많이 쓰시는 편입니다. 올라오는 날도 있고 아닌 날도 있지만 평규적으로 하루에 1개씩은 글을 쓰시려고 노력하는 것 같습니다. 성실함이 블로그 주인님의 장점이라고 생각이 드네요.

국립국어원

stdict.korean.go.kr

표준국어 대사전을 제공하는 국립국어원입니다 검색창에 단어를 입력하면 그에따른 설명이 자세하게 나타납니다 물론 포털사이트에서 검색해도 잘 나오는것이 사실이지만 국립국어원에서 제공한다는 면에서 신뢰도가 아주높습니다 무엇보다 API를 제공하고 있습니다 API를 이용하여 프로그램을 개발하면 나의 홈페이지에 넣을수도 있고 자신의 국어대사전을 만들수도 있습니다 물론 프로그램 개발을 할줄안다는 전제하에서 입니다 제공되는 예시입니다 표준 국어 대사전 개발 지원(Open API) - 사전 검색 https://stdict.korean.go.kr 표준 국어 대사전 개발 지원(Open API) – 사전 검색 결과 20190115141020 5 1 10 404765 나무 1 명사 줄기나 가지가 목질로 된 여러해살이 식물. 일반어 57033 나무 2 명사 소 장수들의 은어로, 팔백 냥을 이르던 말. 일반어