X、新しいアルゴリズムをオープンソースとして公開。Transformer活用の推薦基盤を明らかに

X、新しいアルゴリズムをオープンソースとして公開。Transformer活用の推薦基盤を明らかに

0

Xは、タイムライン推薦を支える新しいアルゴリズムをオープンソースとして公開しました。GitHub上でコードと設計思想を開示し、Transformerを中核に据えた構成が特徴となっています。

Webサービス便利なWebサービスや、面白いWebサービスを紹介します。この特集の一覧を見る

Xは予告通り、新しいアルゴリズムをオープンソースとして公開しました。

公開されたリポジトリは、Xの「For You」フィードを構成する推薦アルゴリズムの全体像を示したものです。フォロー中アカウントの投稿と、フォロー外の投稿候補を組み合わせ、複数段階のフィルタリングと機械学習による順位付けを行う構成となっています。

中核を担うのはTransformerベースのモデルで、ユーザーの過去行動を時系列データとして処理し、いいね、返信、リポスト、視聴時間など複数の反応確率を同時に予測します。これらの予測値を重み付けして最終スコアを算出し、投稿の表示順を決定する仕組みとなっています。

また、候補投稿同士が相互に影響しないようAttentionを制限する設計や、Two-Tower方式による高速な候補検索など、実運用を意識した工夫も明記されています。Xはこれにより、恣意的な手動調整を減らし、モデル主導の推薦を強化していると説明しています。