政治的主張の文字列が100個ある時、それらを立場の近さによってプロットしたい
✂ from 2024/11/12(blu3mo.iconの日記)
政治的主張の文字列が100個ある時、それらを立場の近さによってプロットしたい
polisみたいに、立場の似た主張が近く、異なる主張が遠くなって欲しい
Talk to the Cityのようにsentence embeddingのベクトルを可視化しても、立場の近さより話題の近さが可視化されてしまう
そうなんだよー、わかってくれる人が増えて嬉しいnishio.icon
/nishio/Polisは意見のクラスタリング、TTTCはトピックのクラスタリング
https://gyazo.com/0f548d28c471e085702fb58d2fa8abd9https://gyazo.com/0956679d427bcf71bf52e12226b83c30https://gyazo.com/3f6b5b8cb64c4319ee8dc2b7e0795ebc
高次元ベクトルのどこかに「政治的立場」の情報も含まれているだろうから、うまくその成分を取り出せると嬉しい
polisのデータとかを使って教師あり次元圧縮をやると良さそうblu3mo.icon
一旦LLMに一次元的なラベルづけをさせて教師あり次元圧縮
https://gyazo.com/139269d48375f32d08a318a4d8183518https://gyazo.com/32a05bdf63f790455e56b52187717c9a
いい感じblu3mo.icon
右のマトリックスは第三成分までとってみた
↑の憲法問題のラベルで取った成分を転用してジェンダー問題もプロットしてみた
良さげblu3mo.icon
憲法問題に限らず、保守リベラル一般を表す成分が取れていそうblu3mo.icon
https://gyazo.com/4a6b67f5e8941160f56690822af8ff6f
憲法問題のラベルで取った成分を転用して、ちょっと分断の方向が違うイシューもプロットしてみたい
積極財政vs緊縮財政はあんまりうまく分かれなかった
まあそりゃそうblu3mo.icon
https://gyazo.com/d56743b1ecfbafc4c125f776d898fccd
まだ準備中なんだけどどうせ後でオープンデータになるのでシェアしとくねnishio.icon
https://github.com/nishio/etude-ipynb/blob/main/README.ipynb
感謝blu3mo.icon*2