週記2024-11-06~2024-11-10
先週何をした
社内TTTCのまとめ執筆
世論地図の残りの作業
人数多いものに関して詳細地図を作れないかと考えた
当初はPCAのままk-meansのKを大きくしようかと思っていたが意見ベクトルをUMAPすることを試してみようと考えた
過去の事例
11万人の意見クラスター分析はK=5に固定する分析をした、あまり面白くない
2022年参院選のPolis的可視化はPolisでは2つになるが、実際のところ一塊だよな、PCAの限界だろうな、と思っていた
比較容易なものとして"2022年参院選のPolis的可視化"で使っているデータをUMAPしてみた
圧倒的にはっきりと分かれている
同様のことを11万人のデータでもやったがあまり面白くなかった: 11万人のUMAP
これもまあ、UAMPをもってしても2次元に削減できない構造になってるんだと思う
11/4 2024未踏ジュニア成果報告会
今週やること
意見ベクトルからのブロードリスニングをだいぶやったので、テキストからのブロードリスニングをやっていきたい
とはいえ世論地図の最終データができたのでそれの分析もしたい
今水曜日なのであんまり今週が残ってないぞw
Related Pages
- →polis型×投票行列×vote_matrix×ボーリンググリーン×インタビュー型×デジタル民主主義2030×いどばたシステム×しゃべれるマニフェスト×チームみらいの社会実験「しゃべれるマニフェスト」から得られた知見×多数決×多数決を疑う×量的研究×質的研究×単語頻度分析×トピック抽出×talk_to_the_city×polis型データ×2022年参院選のPolis的可視化×オープンクエスチョンは答えにくい×一つのテキスト欄に過不足なく意見を整理して書くことが難しい×いどばたビジョン×みらいaiインタビュー×文法的クローズドクエスチョンを概念的に開く→
- →サイボウズラボ勉強会×世論地図勉強会×2024衆院選×世論地図×世論地図のumap×濃い塊の抽出×カール・ピアソン×karl_pearson×多次元尺度構成法×主座標分析×自己組織化マップ×som×self-organizing_maps×カーネル法×再生核ヒルベルト空間×サポートベクターマシン×isomap×isometric_mapping×lle×locally_linear_embedding×対立次元×pca×UMAP×2022年参院選のUMAP可視化×polisクラスタ2つになる問題×東京大学谷口研究室・朝日新聞社共同調査×2022年参院選のPolis的可視化×convex_hull×code_for_japan_summit_2024×世論地図3970人umap×dbscan×高次元泥団子×集団極性化×匿名の市民の意見ベクトルはそんなに明瞭に別れてない×umapの結果をクラスタリングするべきか×tsneの結果のクラスタリングは慎重に×賛成反対データのumap×シン東京2050ブロードリスニング×テキスト埋め込みベクトルの分布×text-embedding-3-large×小さな粒のある一つの塊×クラスタリングとパーティショニング×k平均法×クラスタリング×spectralclusteringとhdbscanの違い×日テレnews×2024衆院選×ブロードリスニング×aiによるクラスタ解説×濃いクラスタ抽出×ptttc2024-11-12×外れ値×まずは大雑把に×全体像を把握したい×talk_to_the_city_turbo×tttc:_aiと著作権に関するパブリックコメント×talk_to_the_city勉強会×kj法×発想法×川喜田二郎×凝集型階層的クラスタリング×離れザル×側面×word2vecによる自然言語処理×概念の類似度は距離ではない×50枚のkj法は10時間の想定×5年間で129枚しかkj法をしていない→
- →サイボウズラボ勉強会×ブロードリスニングの「あの図」勉強会×ブロードリスニング×都知事選2024×talk_to_the_city×日テレnews×2024衆院選×ブロードリスニング×世論地図×plurality和訳×japan_choice×議員pedia×投票ナビ×政治参加×社会参加×じぶんごと×可視化×11万人の意見クラスター分析×polis×aiによるクラスタ解説×mielka×結城_東輝×台湾デジタル発展省×mashbean×funding_the_commons_tokyo_2024×glen_weyl×glen+japanchoice×plurality×大きな物語×polis体験レポート:同性婚を合法化すべきか×polis勉強会×polis:_scaling_deliberation_by_mapping_high_dimensional_opinion_spaces×主成分分析×シルエット係数×fisherの正確確率検定×convex_hull×d3.js×モバイルファースト×majority_judgement×多数決×polis_2.0×aiクラスタ解説×会社さんはいない×2022年参院選のPolis的可視化×東京大学谷口研究室・朝日新聞社共同調査×公明正大→
- →UTAS-UMAP×東京大学谷口研究室・朝日新聞社共同調査×utas×UMAP×pPolis2024-05-27×ppolis×aiクラスタ解説×ブラックボックスと掘り下げ×polis的分析×fisherの正確確率検定×2024-10-31の図×2022年参院選のUMAP可視化→
- →安野チームに参加したきっかけ×未踏ジュニア×plurality_tokyo_2023×rickshinmi×安野_貴博×plurality本×関_治之×思考の結節点2024-05-23×都知事選xデジタル民主主義×talk_to_the_city×gisele_chou×tkgshn×talk_to_the_city_turbo×11万人の意見クラスター分析×japan_choice×talk_to_the_city_scatter×aiパブコメ×tttc:_aiと著作権に関するパブリックコメント×シビックテックによる、社会と民主主義のアップデート×ブロードリスニング×broad_listening_in_practice×ブロードリスニングの「あの図」×2024→
- →aiによる振り返り2024×週記2024-09-29~2024-10-06×週記2024-10-06~2024-10-21×週記2024-10-21~2024-10-28×週記2024-10-28~2024-11-06×polisの新ui×social_hack_day_#64→
- →週記2024-11-23~2024-12-01×2024-11-28取材×シン東京2050ブロードリスニング×テキスト形式データからのブロードリスニング×aiにkj法を教える×talk_to_the_cityの抽出ステップについて×濃いクラスタ抽出×安野miro実験2024-11-29×メタバースでのアイデンティティ×cosense英訳のホスティング2024-11-24×高次元データ分析勉強会×2022年参院選のPolis的可視化×UTAS-UMAP→
- →週記2024-11-17~2024-11-23×会社の活動を書く2024-11-17×高次元データ分析勉強会×シン東京2050ブロードリスニング×2022年参院選のPolis的可視化×UTAS-UMAP×テキスト形式データからのブロードリスニング×aiにkj法を教える×外部脳×mem.nhiro.org×2024-11-17外部脳考える×cosense英訳のホスティング×cosense英訳のホスティング2024-11-24×メタバースでのアイデンティティ→
- →週記2024-11-10~2024-11-17×テキスト形式データからのブロードリスニング×濃い塊の抽出×会社の活動を書く2024-11-17×高次元データ分析勉強会×aiにkj法を教える×外部脳×mem.nhiro.org×2024-11-17外部脳考える×2022年参院選のPolis的可視化→
- →2022年参院選のPolis的可視化×市場主義×政府介入×大きい政府と小さい政府×差異から利益を得る人には差異を維持拡大するインセンティブがある×世論地図×sparse_pca×aiによる主成分軸の解説→
- →2022年参院選のUMAP可視化×pca×世論地図×東京大学谷口研究室・朝日新聞社共同調査×次元削減×talk_to_the_city×t-sne×bertopic:_neural_topic_modeling_with_a_class-based_tf-idf×bertopic→
- →民主主義は「本当に」アップデートできるのか？×第二主成分は何？×PCAの軸をLLMに説明させる×イデオロギー・ベクトル×イデオロギー×2022年参院選のPolis的可視化×plurality×utas→
- →polis×pca×talk_to_the_city×UMAP×tttc的クラスタ説明生成×地図×データの多いpolisは半分こになりがち×イデオロギー・ベクトルの可視化×11万人の意見クラスター分析→
- →週記2024-09-16~2024-09-24×メタ認知自分の再生プロセス×民主主義は「本当に」アップデートできるのか？×社内tttc×2024-09-17ベクトル検索止まってる✅×夏のプログラミング・シンポジウム_2024×さまざまな抽象度で問いを抽出×funding_the_commons_tokyoまでの894日×polisの新ui→
- →2024-09-08-民主主義を支える技術×2022年参院選のPolis的可視化×第一主成分×政治的左右×bluemo×第二主成分は何？×思考の結節点2024-09-14×plurality×多次元的×なめらか×一次元的×ステップ×主成分分析×寄与率→
- →民主主義は「本当に」アップデートできるのか？×社内tttc×銀座マダミス会×プロジェクトの束としてのコミュニティ×社会は二つある×夏のプログラミング・シンポジウム_2024×日記2024-09-21×日記2024-09-23×日記2024-06-14×日記2023-09-22→
- →未来予想する批評家×社内tttc×polisの新ui×2024-09-17ベクトル検索止まってる✅×自分に対してアポイントメント×pdm不在問題×やりたい人がやるしかない×自分がやるしかない×自分が作るしかない×社会は二つある×プロジェクトの束としてのコミュニティ×観測された贈与が最初の贈与ではない×日記2024-09-19×日記2024-09-21×日記2024-06-12×日記2023-09-20→
- →open_science_framework×再現性の危機×arnold_ventures×メタサイエンス×center_for_open_science×特許権×期限付き独占権×enforcement×デファクトスタンダード×pocとpmfは違う×データ共有基盤×公共的情報インフラ×インフラ×インフラの予算でやる×予備自衛官×コスモローカル×funding_the_commons×earth_commons×pagoda_thailand_builder_residency×パゴダ×co-creative×コロプラ×御代田×開発合宿×データ活用基盤×federated_learning×秘密計算×protocol_labs×ニューロテック×gitcoin×quadratic_funding×optimism×token_house×dao_treasury×インパクト評価×ebpm×トニー・ブレア×intervention×介入×評価システムも評価される×ビジョナリーにcooが必要×aoiのtttcページにaudrey_tangのコメントがある×ワイガヤ×出しつくした感×焼きなまし法×認知的体力が無限大×熱意のある人はリソース×pagoda×4seas×フォーシーズ×コミュニティマネージャ×信頼の醸成×democratic_inputs_to_ai×プロセス評価×sib×事業仕分け×競争性×ウェルビーイングインデックス×ウェルビーイング×well-being×歯ブラシ問題×相互運用性×interoperability×幸福の定義×人々の幸福の定義は人間が行う必要性がある×サイボウズと語ろうplurality_多元性の実践と期待×aiによる統治×人間の意思決定×地域幸福度指標×デジタル庁×デジタル田園都市国家構想×移動式投票×曲線下面積×集団的意思決定×マッチング×レコメンド×複雑なものを複雑なまま理解する×2022年参院選のPolis的可視化×blu3mo×news_from_all_sides×つながり×昭和的価値観ai×polymarket×アイデアクラウド×hft→
"Engineer's way of creating knowledge" the English version of my book is now available on [Engineer's way of creating knowledge]
(C)NISHIO Hirokazu / Converted from [Scrapbox] at [Edit]