ICLR2020のLeCunとBengioの講演
ICLR: Reflections from the Turing Award Winners
>ICLR2020のLeCunとBengioの講演。LeCunは未来は自己教師あり学習にあり、不確実性を扱える正則化付潜在変数エネルギーモデルに注目している。BengioはNeurIPSの講演と同様に意識と高次の概念を扱う疎な因子グラフについて。Q&Aが研究のノウハウとか過去の話とかで面白い
Related Pages
- →認知の解像度の段階×認知の段階×認知の解像度×物事の認識の解像度×誤った2×抽象化は善ではない×中庸×軸は一本ではない×不確実性×分布×2属性のトレードオフ×一つの概念だと思っていたものが入れ子の二つの概念×点ではなく大きさがある×逆に進むがゴールは同じ×点だと思い込む×境界がない×点ではなく確率分布×分布を点だと思う間違い×同じものに属する違うもの×中割り×誤った二分法×2つの別のものではなくグラデーション×誤った二項対立×軸は一次元ではない×強弱軸は一本ではない×大小関係が存在しない×期待値が最頻値ではない×平均からのズレとサンプルサイズ×平均の比較×有意差と損益と分散×大きさがあるのでは？×一つ？二つ？×境界は明確か？×3つ目があるのでは？×無数にあるのでは？×軸が複数あるのでは？×分散があるのでは？×エフロンのダイス×確率共鳴×分散が異なるのでは？×分布形状が異なるのでは？×分布形状の認識×平均だけでなく分布の形状に注意×点と分散と分布形状×現実の解像度と認知の解像度→
- →経営はアート×構造的思考×Negative Capability×重箱の隅×構造的思考はソリューションの積み木ではない×問題の構造×貧弱な問題理解×机上の空論×不確実性×不確実性の高いところからやる×知識獲得×仮説を検証×概念設計×詳細設計×実装の不確実性×マーケット評価の不確実性×計画には二種類ある×何を作るか×自分の理解の外側に置いてしまう×理解できないものがアートに見える×アジャイル→
- →谷口_忠大×記号接地問題×記号創発問題×記号創発システム×記号学×記号論×プラグマティズム×ユクスキュルの環世界論×発達心理学×構成主義×ネオ・サイバネティクス×記号創発ロボティクス×言語習得×ロボットによる語彙獲得×確率的生成モデル×マルチモーダル物体概念形成×マルチモーダル場所概念形成×認知発達ロボティクス×自由エネルギー原理×予測符号化×好奇心×探索×感情×予測的処理×ニューロロボティクス×表現学習×世界モデル×身体性×エナクティヴィズム×現象学×意識×クオリア×aiロボット社会文化心理学×記号圏×分布意味論×マルチモーダルな言語教育×創発する倫理×法システム×集合的予測符号化×仮説社会的知能の三層モデル×生成aiとの共生社会×フロリディのgdi×西垣の基礎情報学×サイバネティクス×環世界×記号創発システム論→
- →拡大していくプロセス×指数関数的×ステップ関数×指数関数的発展が始まったタイミングでは誰も気づいてない×転がる雪玉×不確実性×後押し×指数的成長の後押し×不確実性コーン×初期値の小さな差が将来の大きな差につながる×思考の結節点2024-08-03→
- →知識は実践によって検証されなければならない×思想は仮説であり実装によって検証されなければならない×行動によって検証されないアイデアに価値はない×実験×実践×実装×行動×未知の経験×不確実性×実験によって検証×実践によって検証×ニュアンス×あまり区別して使い分けてない×あえていうなら、イコールではなく少し差がある×予測モデル×社会実装×ユーザーテスト→
- →なめらかな世界のゲリラ×柔軟性×適応力×機動力×ネットワーク×協力関係を構築する×小さな実験の積み重ね×実験×不確実性×環境への適応×環境を観察し味方につける×心理戦×長期的視点×明確な敵がいない状況では、私たち自身が変化し続ける環境そのものと戦っている×環境適応×明確な敵がいない状況では、変化し続ける環境と戦っている→
- →aiが毎日研究ノートを書く×多様な視点×反脆弱性×不確実性×急がば回れ×暗黙知×共同化×pdcaサイクル×seciモデル×これ自体が実例×human_in_the_loop×安定した価値×aiを人間と対等な存在にする×aiを道具化×🤖2023-08-12 07:08×パーソン論×「巧遅は拙速に如かず」には不安耐性が必要×🤖2023-08-12_03:01×脱線=連想=新結合発見×kj法の表札をいつ変更するのか(作成プロセス)×kj法勉強会@サイボウズ×seciモデルとpdcaサイクル×🤖2023-08-12_02:30×s-pdca×納得感のない計画×🤖2023-08-12_01:16→
- →タックマンモデル×storming×tuckmanのチーム開発モデル×bruce_tuckman×チーム×対立×目的×役割×リーダーシップ×不確実性×信頼×開かれたコミュニケーション×感情の表現×対立解決→
- →aiが毎日研究ノートを書く×AIとの共同化×多様な視点×反脆弱性×不確実性×急がば回れ×暗黙知×共同化×pdcaサイクル×seciモデル×human_in_the_loop×🤖2023-08-12_03:01×パーソン論×日記2022-10-03×xを罵倒だと考える人は自分はxでないと仮定している×組織への情報流入経路は2つある×hatena2009-04-03×半精度演算の速度×hatena2011-11-02×暇とは何か×hatena2012-11-16×エンジニアの知的生産術_2階層目次→
- →gpt4に文脈を補わせる実験×不確実性×assumption×仮定×投機的×将来価値の実現×実務的×ビジョナリー×実現可能性×夢物語×非効率性×素人のアイデアは口頭発表では独創性高く見えるが実現可能でない→
- →人生の選択肢をどうやって知ったか？×移動×なぜ「移動」が重要なのか×観測範囲×移動はそれまで見えていなかったものを見る機会×選択肢をどうやって知るのか×自分が見てないものを見た人×視野を広げる×人生の選択肢×選択肢は平等に与えられるものではない×与えられると思い込んで得るための行動をしない×白馬の王子様×選択肢の将来的価値×価値が不明確な選択肢×現金預金の罠×将来価値を事前に知り得るという勘違い×計画的偶発性×不確実性×隣の芝は青い×歩くことは考えることに良い×哲学の道→
- →エンジニアの知的生産術英語化プロジェクト(-20190522)×自動ブラケティング×scrapboxの全ページに特定タグをつける×進捗よりもまず計測×不確実性×不確実性の高いタスクを先にやって不確実性を減らす×英語版作成に伴う推敲(~1章)×done_is_better_than_perfect×曳光弾×typora×leanpub×curiosity×information_asymmetry×やる気×バーンダウンチャート×偽りの進捗×ゴールを近くする事例→
- →アジャイル×見積り×計画×優先順位×不確実性×目標の不確実性と手段の不確実性×リスク×知識の獲得×リスクと価値と優先順位×顧客満足度の狩野モデル×不確実性コーン×労力と見積もりの正確さ×見積もり×アジャイルな見積もりと計画づくり→
"Engineer's way of creating knowledge" the English version of my book is now available on [Engineer's way of creating knowledge]
(C)NISHIO Hirokazu / Converted from [Scrapbox] at [Edit]