# Tencent Hunyuan、Hy4 previewの214 GiBへの圧縮を強調

Tencent Hunyuanは、混合精度量子化によりHy4 previewの770Bパラメータの重みを約1.5TBから214 GiBに縮小したことに関するZhihu Frontierの解説を引用した。引用された記述では、パラメータ数は変わらず、MRCRはほぼ変わらず、数学でわずかな低下があると報告している。

Language: ja
Time zone: Asia/Tokyo
Current time (UTC, cached as of): 2026-11-10T07:02:00.000Z
Query date (Asia/Tokyo): 2026-11-10

HTML: https://didcodexreset.com/ja/news/023f8b753f514cfaa3899c5e.html

Content language: ja
Localization state: translated

出典：Tencent Hy · 2026/9/22 11:46:31 公開

Tencent Hunyuan（[@TencentHunyuan](https://x.com/TencentHunyuan)）は「サイズは小さく、知能は同じ」というコメントとともにZhihu Frontierを引用し、**Hy4 preview**の圧縮に関する解説を指摘した。

引用された投稿で、Zhihu Frontier（[@ZhihuFrontier](https://x.com/ZhihuFrontier)）は、Tencent Hunyuanの量子化チームの貢献者yghstillが、**770B**パラメータモデルの重みを約**1.5TBから214 GiB**に縮小してパッキングしたと説明したと述べた。パラメータ数は770Bのままであり、圧縮はそれらの重みの表現方法を変更する。解説ではSherry量子化アルゴリズム、STQ1_0ストレージ形式、MIX-STQ1_0混合精度割り当てを挙げ、完全な混合精度モデルは重みあたり平均約**2.38ビット**であり、積極的な圧縮はエキスパート重みに集中していると述べている。

引用されたアカウントによると、チームはパッチを当てたllama.cppビルドにSTQ1_0 CUDAカーネルを実装し、MRCR検索性能はほぼ変わらず、数学でわずかな低下があると報告している。同様のビット予算のUD-IQ1_Mと比較して、混合精度モデルは報告された評価でリードし、MRCRで5ポイント以上の向上を含むという。Tencent Hunyuan自身の投稿ではそれらの測定値は提供されていない。

Tags: 混元, Hy4, 量子化, テンセント

[元の投稿を見る](https://x.com/TencentHunyuan/status/2102225827903807939)