Trino에 대한 실무 스터디 가이드

1. Trino란?

Trino(구 PrestoSQL)는 오픈소스 분산 SQL 쿼리 엔진으로, 페타바이트 규모의 데이터를 초고속으로 분석할 수 있는 query-engine입니다. 다양한 데이터 소스(Hive, Kafka, S3, PostgreSQL 등)를 연합(federation)하여 ANSI SQL로 쿼리할 수 있으며, 별도의 데이터 이동 없이 실시간 분석을 지원합니다.

2. 왜 써야 하는가?

기존 도구 대비 Trino의 강점은 인-플레이스 분석과 초고속 쿼리입니다. 데이터 이동 비용을 없애고, 실시간 BI/AD-hoc 쿼리를 지원합니다.

3. 핵심 개념

Trino는 Coordinator가 쿼리를 파싱/최적화/스케줄링하고, Worker들이 병렬 실행합니다. Catalog은 데이터 소스를 논리적으로 그룹화하며, Connector가 실제 데이터 액세스를 담당합니다.

주요 용어:

• Query: ANSI SQL 지원 (JOIN, WINDOW 등 풀 SQL).
• Exchange: Worker 간 데이터 셔플.
• Split: 데이터 분할 단위.

4. 퀵스타트

Step 1: Docker로 설치 (5분)

docker run -d -p 8080:8080 --name trino trinodb/trino:latest

브라우저에서 http://localhost:8080 접속 확인.

Step 2: 기본 설정 (config.properties 추가)

커스텀 설정 시:

# etc/config.properties
coordinator=true
node-scheduler.include-coordinator=false
http-server.http.port=8080
query.max-memory=50GB
query.max-memory-per-node=1GB
discovery-server.enabled=true
discovery.uri=http://localhost:8080

Step 3: CLI로 첫 쿼리

docker exec -it trino trino --server localhost:8080 --catalog system --execute 'SHOW CATALOGS;'

Step 4: Python 클라이언트 (trino-python-client)

pip install trino

# example.py
import trino

conn = trino.dbapi.connect(
    host='localhost',
    port=8080,
    user='admin',
    catalog='system',
    schema='default'
)

cur = conn.cursor()
cur.execute('SELECT * FROM system.runtime.nodes LIMIT 5')
print(cur.fetchall())
cur.close()
conn.close()

실행: python example.py

5. 핵심 설정 레퍼런스

6. 실무 팁 & 트러블슈팅

자주 겪는 문제 1: OOM (Out of Memory)

원인: query.max-memory 초과.

해결:

# config.properties 증가
query.max-memory-per-node=4GB
# 또는 쿼리 힌트: /* +SET SESSION max_memory = 10GB */

문제 2: Query Timeout

해결: query.timeout=2h 설정 또는 SET SESSION query_timeout = 7200s;

문제 3: Slow JOIN

팁: /* +JOIN_REORDER_STRATEGY=ELIMINATE_CROSS_JOINS */ 힌트 사용. Broadcast JOIN 우선.

실무 팁

• K8s Helm 차트로 배포: helm install trino trinodb/trino
• 모니터링: Prometheus + Grafana (trino exporter)
• 보안: HTTPS + LDAP (etc/config.properties)
• 성능: Iceberg 테이블 사용 (ACID 지원)

7. 참고 자료

• 공식 문서 (Latest)
• Trino 홈페이지
• GitHub Repository
• 설치 가이드
• Hive Connector
• SQL Functions
• Python Client: pip install trino - GitHub