位置埋め込み

Transformerの位置表現（AbsPE vs RoPE）を実験で比較。長系列対応の性能差と課題を解説。LLM開発者が必見の検証結果をチェック！