💎목표

• 지난 시간에 배운 Flet 기반
  • Flet 기초
• DuckDB를 사용하여 데이터 저장 및 접근
  • Column 단위로 처리하여 Pandas의 DataFrame과 찰떡 궁합

An in-process SQL OLAP database management system

<aside> 🔥

도전

Pandas 기초 공부해 볼 것

DataFrame (및 Series) 알면 매우 편함

10 minutes to pandas — pandas 3.0.2 documentation

</aside>

• 강의에서 사용하는 DataFrame 사용법 미리 이해해 볼 것

marimo | a next-generation Python notebook

• 전체 코드

⭐DuckDB

• 대규모 dataset에 대한 복잡한 집계 및 분석을 위해 OLAP(온라인 분석 처리)에 특화된 오픈소스 데이터베이스

<aside> 🍰

정보

• OLTP (On-line Transaction Processing) : 실시간 트랜잭션 처리
  • Tuple (row) 단위 처리
  • 예제) 친구한테 만원 송금
  • Begin Transaction, 연산들, Commit (실패하면 Rollback)
• OLAP (On-line Analytical Processing): 실시간 분석 처리
  • Attribute (column) 단위 처리
  • 예제) 중간 고사 (컬럼) 분석, 주식 종가 (컬럼) 분석 등

</aside>

• 별도의 서버 설치 없이 파일 기반으로 작동
• Pandas와 완벽하게 호환되고 SQL 속도가 매우 빠름
• 서버 설정 없이 파이썬 코드 몇 줄로 수GB급 데이터를 순식간에 처리할 수 있음
• DuckDB는 PostgreSQL의 SQL 문법 사용하여 좋음
• MIT 라이센스로 상업적 이용에 제한이 없음

marimo | a next-generation Python notebook

import duckdb
import pandas

# 데이터베이스 접속 (메모리 사용)
con = duckdb.connect()

# 테이블 생성
con.execute("""
    CREATE TABLE IF NOT EXISTS assets (
        ticker VARCHAR PRIMARY KEY,
        name VARCHAR,
        type VARCHAR
    )
""")

# 데이터 삽입
con.execute("""
    INSERT INTO assets VALUES 
        ('005930', '삼성전자', 'Stock'),
        ('000660', 'SK하이닉스', 'Stock'),
        ('148020', 'RISE 200', 'ETF'),
        ('360750', 'TIGER 미국S&P500', 'ETF'),
        ('379810', 'KODEX 미국나스닥100', 'ETF'),
        ('411060', 'ACE KRX 금현물', 'ETF'),
        ('449450', 'PLUS K방산', 'ETF')
""")

# 데이터 검색
df = con.execute("SELECT * FROM assets").df()
# con.close()

print(df)
# df