折扣係數 (Discount factor)

什麼是折扣係數（Discount Factor）？

折扣係數是數學和經濟學中用來衡量未來收益或回報值相比於當前價值的一種比例係數。它在強化學習、金融投資、計算經濟學等領域中扮演重要角色，用來將未來可能獲得的收益折算為現值，反映時間偏好和風險，幫助決策者在權衡短期與長期利益時做出合理判斷。

折扣係數的定義與作用

折扣係數一般用符號γ（gamma）表示，取值範圍在0到1之間。它表示在每個時間步長中，對未來收益的重要程度的縮減比例。例如，γ值越接近1，代表未來的收益和當前收益同等重要；γ值越接近0，則表示更看重當前收益，未來收益影響較小。

在數學上，未來第t期的收益r_t經過折扣後，計算式為γ^(t-1) * r_t。這樣，遠期收益會被折扣得更少，短期收益權重較大。

在強化學習中，智能體（Agent）需要在多個時間步長中做出決策，以最大化累積回報。折扣係數用於計算“折扣累積回報”，即：

Gt=rt+1+γrt+2+γ2rt+3+⋯Gt=rt+1+γrt+2+γ2rt+3+⋯

折扣係數平衡了即時回報和未來回報的權重，影響智能體的行為策略。若γ接近1，智能體傾向長期利益；若γ較小，則更重視立即收益。

在金融領域，折扣係數用於計算現金流的現值。投資者會用折扣率（Discount Rate）將未來收益折現到當下確定價值，以判斷投資價值。例如，5年後得到100元的價值，根據折扣率折算為當前的現值。

折扣係數顯示了貨幣的時間價值及機會成本，是定價、風險管理、成本效益分析的基礎。

折扣係數通常根據折現率r計算得出：

γ=11+rγ=1+r1

其中r代表利率或投資所要求的回報率。

假設一項投資在5年後可獲得10000元收益，假設折現率為10%，那麼折扣係數為：

γ=11+0.1=0.909γ=1+0.11=0.909

該收益換算到現在的價值約為10000 × 0.909^5 ≈ 6209元，用於衡量投資價值。

折扣係數是一個衡量未來收益價值相對當前的縮減因子，廣泛應用於經濟決策和強化學習等領域。它是連接時間、價值與風險的關鍵參數，幫助人們理性規劃與評估長期回報，實現科學的決策和優化。對於需要考慮時間序列回報的問題，折扣係數不可或缺，是決策理論中的核心概念之一。