[GitHub] README.md에 블로그 최신 글 가져오기

README.md에 블로그 최신 글 가져오기

위 이미지와 같이 GitHub README에 내 블로그 최신 글을 자동으로 주기적으로 가져오고 README에 작성되도록 하는 방법에 대해 정리해보겠습니다. (티스토리 기준)

과정은 다음과 같습니다.

1. Python으로 블로그 피드(RSS) 크롤링
2. GitHub Actions를 활용하여 Workflow 생성

 

1. RSS 크롤링 테스트

먼저 티스토리 피드가 잘 불러와지는지 테스트를 진행합니다. (테스트이며, 필수는 아닙니다. 2번으로 넘어가셔도 됩니다.)

import feedparser

URL="https://dkswnkk.tistory.com/rss" # URL = "내블로그 주소/rss"
RSS_FEED = feedparser.parse(URL)

print(RSS_FEED)

---

URL부분에 자신의 블로그 주소를 넣고 뒤에 /rss를 붙여주시면 됩니다. 

실행 결과

결과가 조금 지저분하지만 모든 게시글을 JSON 형태로 잘 불러오는 것을 확인할 수 있습니다.

SSL 오류

만약 위와 같이 SSLCertVerificationError 에러가 발생한다면 주소 https를 http로 작성하고 실행하면 정상적으로 출력이 될 것입니다.

우리는 저 수많은 JSON 형태에서 'entries' 키 값을 사용할 예정입니다. 

import feedparser

URL="http://dkswnkk.tistory.com/rss"
RSS_FEED = feedparser.parse(URL)

for feed in enumerate(RSS_FEED['entries']):
    print(feed)

---

{
    'title': '[백준,c++] 16236번 - 아기 상어',
    'title_detail': {
        'type': 'text/plain',
        'language': None,
        'base': 'http://dkswnkk.tistory.com/rss',
        'value': '[백준,c++] 16236번 - 아기 상어'
    },
    'links': [
        {
            'rel': 'alternate',
            'type': 'text/html',
            'href': 'https://dkswnkk.tistory.com/621'
        }
    ],
    'link': 'https://dkswnkk.tistory.com/621',
    'summary': '내용';,
    'summary_detail': {
        'type': 'text/html',
        'language': None,
        'base': 'http://dkswnkk.tistory.com/rss',
        'value': ''
    },
    'tags': [
        {
            'term': '백준(BOJ)',
            'scheme': None,
            'label': None
        },
        {
            'term': '16236',
            'scheme': None,
            'label': None
        },
        {
            'term': 'BOJ',
            'scheme': None,
            'label': None
        },
        {
            'term': '시뮬레이션',
            'scheme': None,
            'label': None
        },
        {
            'term': '아기 상어',
            'scheme': None,
            'label': None
        }
    ],
    'authors': [
        {
            'name': '안주형'
        }
    ],
    'author': '안주형',
    'author_detail': {
        'name': '안주형'
    },
    'id": 'https://dkswnkk.tistory.com/621',
    'guidislink': False,
    'comments': 'https://dkswnkk.tistory.com/621#entry621comment',
    'published': 'Sun, 28 Aug 2022 12:53:53 +0900',
    'published_parsed': time.struct_time(tm_year=2022, tm_mon=8, tm_mday=28, tm_hour=3, tm_min=53, tm_sec=53, tm_wday=6, tm_yday=240, tm_isdst=0)
}

---

entries의 형태는 위처럼 구성되어 있습니다. 웬만한 포스트의 정보는 가져올 수 있는 걸 확인할 수 있습니다. 

저는 본문 최상단 이미지처럼 작성 날짜, 제목, 링크 정도만 가져와서 사용하도록 하겠습니다.

 

2. GitHub Repository에 python 파일 생성

레포지토리에 아래의 코드가 작성된 .py 파일을 생성합니다. URL부분에 자신의 블로그 주소를 넣고 뒤에 /rss를 붙여주시면 됩니다. 

import feedparser, time

URL = "https://dkswnkk.tistory.com/rss"
RSS_FEED = feedparser.parse(URL)
MAX_POST = 5

markdown_text = """
## ✅ Latest Blog Post

"""  # list of blog posts will be appended here

for idx, feed in enumerate(RSS_FEED['entries']):
    if idx > MAX_POST:
        break
    else:
        feed_date = feed['published_parsed']
        markdown_text += f"[{time.strftime('%Y/%m/%d', feed_date)} - {feed['title']}]({feed['link']}) <br/>\n"
        
f = open("README.md", mode="w", encoding="utf-8")
f.write(markdown_text)
f.close()

---

 

3. GitHub Actions 생성

Actions 클릭

set up a workflow yourself 클릭

main.yml 작성

기존에 미리 작성되어 있던 코드를 지우고 아래의 코드를 붙여 넣고 Start Commit 클릭(코드에 이메일과 유저네임 확인)

# This workflow will install Python dependencies, run tests and lint with a single version of Python
# For more information see: https://help.github.com/actions/language-and-framework-guides/using-python-with-github-actions

name: Python application

on:
  push:
    branches: [ "main" ]
  pull_request:
    branches: [ "main" ]
  schedule:
      - cron: "0 0 */1 * *"

jobs:
  build:

    runs-on: ubuntu-latest

    steps:
    - uses: actions/checkout@v3
    - name: Set up Python 3.10
      uses: actions/setup-python@v3
      with:
        python-version: "3.10"
    - name: Install dependencies
      run: |
        python -m pip install --upgrade pip
        pip install feedparser
    - name: Run Update Python Script
      run: |
        python main.py
    - name: Update README.md file
      run: | 
        git pull
        git add .
        git diff
        git config --local user.email "본인의 깃허브 이메일 입력"
        git config --local user.name "본인의 깃허브 이름 입력"
        git commit -m "Updating Blog Posts"
        git push

 

---

 

결과 확인