-
-
Notifications
You must be signed in to change notification settings - Fork 0
Expand file tree
/
Copy pathYfinanceNormalize.py
More file actions
244 lines (205 loc) · 9.35 KB
/
Copy pathYfinanceNormalize.py
File metadata and controls
244 lines (205 loc) · 9.35 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
import os
import time
import matplotlib.pyplot as plt
import numpy as np
import pandas as pd
import korean_font # noqa: F401
os.makedirs("../result", exist_ok=True)
print("=" * 65)
print(" yfinance 주가 데이터 정규화 비교 실습")
print("=" * 65)
print()
print(" 정규화 방법 비유:")
print(" ┌──────────────────────────────────────────────────────┐")
print(" │ Min-Max : 키를 0~100 점수로 바꾸는 것 (0=최소) │")
print(" │ Z-점수 : 평균에서 얼마나 떨어졌는지 표준화 │")
print(" │ 로그수익률: 비율 변화 → 덧셈으로 표현 (안정적) │")
print(" └──────────────────────────────────────────────────────┘")
# ── 1. 데이터 로드 ─────────────────────────────────────────
print("\n[1/7] 주가 데이터 로드 중...")
time.sleep(0.4)
TICKER = '078935.KS'
prices = None
try:
import yfinance as yf
from datetime import date
df = yf.download(TICKER, start='2020-01-01', end=date.today().isoformat(),
auto_adjust=True, progress=False)
if len(df) > 50:
prices = df['Close'].squeeze().dropna()
print(f" ✓ {TICKER}: {len(prices)}일 데이터 로드")
except Exception as e:
print(f" yfinance 연결 실패 ({e}) → 가상 데이터로 실습")
if prices is None:
np.random.seed(42)
days = 500
t = np.arange(days)
prices = pd.Series(50000 + 20*t + 5000*np.sin(t/40) + np.random.normal(0, 1000, days))
print(f" → 가상 {len(prices)}일치 주가 생성")
raw_data = {TICKER: prices}
time.sleep(0.3)
# ── 2. 세 가지 정규화 함수 정의 ───────────────────────────
print("\n[2/7] 세 가지 정규화 함수 정의 중...")
time.sleep(0.4)
def minmax_normalize(series):
"""Min-Max 정규화: 0~1 범위로 압축"""
s_min, s_max = series.min(), series.max()
return (series - s_min) / (s_max - s_min + 1e-8), s_min, s_max
def zscore_normalize(series):
"""Z-점수 정규화: 평균=0, 표준편차=1"""
mean, std = series.mean(), series.std()
return (series - mean) / (std + 1e-8), mean, std
def log_return(series):
"""로그 수익률: ln(P_t / P_{t-1}) — 가법적이고 정규분포에 가까움"""
return np.log(series / series.shift(1)).dropna()
print(" ① Min-Max 정규화: x' = (x - min) / (max - min)")
print(" ② Z-점수 정규화: x' = (x - μ) / σ")
print(" ③ 로그 수익률 : r = ln(P_t / P_{t-1})")
time.sleep(0.3)
# ── 3. 정규화 적용 ────────────────────────────────────────
print("\n[3/7] 각 종목에 정규화 적용 중...")
time.sleep(0.5)
normalized_results = {}
for ticker, prices in raw_data.items():
mm, mn, mx = minmax_normalize(prices)
zs, mu, sigma = zscore_normalize(prices)
lr = log_return(prices)
normalized_results[ticker] = {
'prices': prices,
'minmax': mm,
'zscore': zs,
'logret': lr,
'mm_range': (mn, mx),
'zs_stat': (mu, sigma),
}
print(f" {ticker}: 원본 범위={prices.min():.1f}~{prices.max():.1f} "
f"MM=[0,1] Z=[{zs.min():.1f}, {zs.max():.1f}] "
f"LogRet μ={lr.mean():.4f} σ={lr.std():.4f}")
time.sleep(0.3)
# ── 4. 역정규화 (Min-Max) ──────────────────────────────────
print("\n[4/7] Min-Max 역정규화 정확도 확인 중...")
time.sleep(0.4)
ticker0 = list(raw_data.keys())[0]
r = normalized_results[ticker0]
mn, mx = r['mm_range']
reconstructed = r['minmax'] * (mx - mn) + mn
max_err = (reconstructed - r['prices']).abs().max()
print(f" {ticker0} 역정규화 최대 오차: {max_err:.6f} (≈0이면 완벽)")
time.sleep(0.3)
# ── 5. 로그수익률 통계 & 분포 ─────────────────────────────
print("\n[5/7] 로그수익률 통계 출력 중...")
time.sleep(0.4)
for ticker, res in normalized_results.items():
lr = res['logret']
print(f" {ticker}: 평균={lr.mean():.5f} σ={lr.std():.5f} "
f"최소={lr.min():.4f} 최대={lr.max():.4f}")
time.sleep(0.3)
# ── 6. 다종목 비교 (Z-점수 기준) ──────────────────────────
print("\n[6/7] 다종목 Z-점수 정규화 비교 중 (스케일 통일)...")
print(" Z-점수로 정규화하면 가격대가 달라도 같은 그래프에 비교 가능!")
time.sleep(0.4)
# ── 7. 시각화 ─────────────────────────────────────────────
print("\n[7/7] 시각화 저장 중...")
time.sleep(0.5)
res = normalized_results[TICKER]
p_vals = res['prices'].values
mm_vals = res['minmax'].values
zs_vals = res['zscore'].values
lr_vals = res['logret'].values
fig = plt.figure(figsize=(14, 12))
# 원본 가격
ax1 = fig.add_subplot(3, 2, 1)
ax1.plot(p_vals, color='steelblue', linewidth=1.2, label=TICKER)
ax1.set_title(f"① 원본 가격 ({TICKER})")
ax1.set_xlabel("거래일")
ax1.set_ylabel("주가 (원)")
ax1.legend(fontsize=8)
ax1.grid(alpha=0.3)
# Min-Max 정규화
ax2 = fig.add_subplot(3, 2, 2)
ax2.plot(mm_vals, color='tomato', linewidth=1.2, label='Min-Max')
ax2.set_title("② Min-Max 정규화 [0, 1]")
ax2.set_xlabel("거래일")
ax2.set_ylabel("정규화 값")
ax2.legend(fontsize=8)
ax2.grid(alpha=0.3)
# Z-점수 정규화
ax3 = fig.add_subplot(3, 2, 3)
ax3.plot(zs_vals, color='mediumseagreen', linewidth=1.2, label='Z-점수')
ax3.axhline(0, linestyle='--', color='gray', linewidth=0.7)
ax3.set_title("③ Z-점수 정규화 (μ=0, σ=1)")
ax3.set_xlabel("거래일")
ax3.set_ylabel("표준편차 단위")
ax3.legend(fontsize=8)
ax3.grid(alpha=0.3)
# 로그 수익률
ax4 = fig.add_subplot(3, 2, 4)
ax4.plot(lr_vals, color='darkorange', linewidth=0.8, alpha=0.85, label='로그수익률')
ax4.axhline(0, linestyle='--', color='gray', linewidth=0.7)
ax4.set_title("④ 로그 수익률 ln(P_t / P_{t-1})")
ax4.set_xlabel("거래일")
ax4.set_ylabel("로그 수익률")
ax4.legend(fontsize=8)
ax4.grid(alpha=0.3)
# 로그수익률 분포
ax5 = fig.add_subplot(3, 2, 5)
ax5.hist(lr_vals, bins=50, alpha=0.7, color='darkorange', edgecolor='none')
ax5.set_title("⑤ 로그수익률 분포 (정규분포에 가까울수록 좋음)")
ax5.set_xlabel("로그 수익률")
ax5.set_ylabel("빈도")
ax5.grid(alpha=0.3)
# 정규화 방법 비교 요약 텍스트
ax6 = fig.add_subplot(3, 2, 6)
ax6.axis('off')
summary = (
"정규화 방법 비교 요약\n\n"
"① Min-Max 정규화\n"
" • 범위: [0, 1]\n"
" • 장점: 직관적, 역변환 쉬움\n"
" • 단점: 이상치에 민감\n\n"
"② Z-점수 정규화\n"
" • 범위: (−∞, +∞), μ=0 σ=1\n"
" • 장점: 이상치 강건, 다종목 비교 용이\n"
" • 단점: 값 범위 직접 해석 어려움\n\n"
"③ 로그 수익률\n"
" • r = ln(P_t / P_{t-1})\n"
" • 장점: 정상성, 가법적, 분포 안정\n"
" • 단점: 절대 가격 정보 소실\n\n"
"★ 딥러닝 입력에는 Min-Max or Z-점수\n"
" 통계 분석·수익률 모델에는 로그 수익률"
)
ax6.text(0.05, 0.95, summary, transform=ax6.transAxes,
fontsize=8.5, verticalalignment='top',
bbox=dict(boxstyle='round', facecolor='lightyellow', alpha=0.8))
# ── 한글 어노테이션 삽입 (plt.tight_layout 이전) ──────────
# 전체 요약 텍스트
fig.text(0.5, 0.98,
"같은 기준으로 맞춰야(정규화) AI가 공평하게 학습할 수 있어요",
ha='center', fontsize=9, color='#333', weight='bold')
# ── 원본 패널 (ax1) ──
ax1.text(0.5, -0.18,
f'GS피앤엘({TICKER}) 실제 주가 — 정규화 전 원본',
transform=ax1.transAxes, ha='center', fontsize=7, color='gray')
# ── MinMax 패널 (ax2) ──
ax2.text(0.5, -0.18,
'0=역대 최저가, 1=역대 최고가 — AI 입력에 자주 사용',
transform=ax2.transAxes, ha='center', fontsize=7, color='gray')
# ── Z점수 패널 (ax3) ──
ax3.text(0.5, -0.18,
'평균에서 얼마나 떨어졌는지로 표현해요 (0=평균, +1=평균보다 1 표준편차 위)',
transform=ax3.transAxes, ha='center', fontsize=7, color='gray')
# ── 로그수익률 패널 (ax4) ──
ax4.text(0.5, -0.18,
'하루하루의 변화율이에요 — 위아래로 튀는 것이 정상이에요',
transform=ax4.transAxes, ha='center', fontsize=7, color='gray')
# ── 분포 패널 (ax5) ──
ax5.text(0.5, -0.18,
'종 모양에 가까울수록 통계 계산이 잘 맞아요',
transform=ax5.transAxes, ha='center', fontsize=7, color='gray')
plt.subplots_adjust(top=0.93)
plt.tight_layout()
ticker_tag = TICKER.replace(".", "_")
out_name = f"../result/YfinanceNormalize_{ticker_tag}.png"
plt.savefig(out_name, dpi=150, bbox_inches="tight")
print(f" → 그래프 저장: {out_name}")
print("\n✓ yfinance 주가 정규화 비교 실습 완료!\n")