2018-09-30
休暇で作ったものの関係を忘れないように図解しておいた
書籍PDFからテキスト抽出
テキスト中のCIDフォント埋め込みを置換する
テキストから本文抽出
これこの図を描いた後機械学習による書籍PDFからの本文抽出に発展
本文データからキーフレーズ抽出
キーフレーズを元にチャットボット作成
neologd辞書で形態素解析して単語列を得る
単語列をRNNで言語モデルにする
言語モデルから文章生成
Related Pages
- →聞き出しチャットシステム×一人用cartographer×新keichobot×2025年のkeichobot×keichoからkeichobotにリネーム×聞き出しチャット使い方サンプル×聞き出しチャットシステム会話ログ×聞き出しチャットシステムリリースノート×🤔scrapboxエクスポート時のフッタを指定可能にする×dynalist×□解説のスクリーンショットを取り直す×謎のログが途切れるバグが起きたので相談したい×終わりのデザイン×能動学習のうまくいかない話をしてたら本を読めという結論になった×🤔タスク管理チャットボット×🤔画面高さとバーチャルキーボードの問題×🤔httpだとクリップボードが使えない？×🤔選択肢回答だけを受け付ける×🤔モードの変更をメニューにつける？×pkeicho202103-202104done×質問がコマンドボタンを作れるようにする×会話ログ2021-01-30×質問自然度データセット×二つの引数をとる質問のチューニング×会話中に良し悪しフィードバック×regroupへワンクリックでインポート×対象として不適切なものを分析対象から除外するignoreファイル×フィードバックボタン:いいね×スコア=発展度,_not注目度×聞き出しチャットシステムのタスク整理版を作るとしたら×真昼の太陽×シンボルの関係が同一×部分観測マルコフ決定過程×会話ログ:状態遷移について×キーワードと質問の選択は内積注意×基本5質問の出現順番×write_learning_pair×キーワードを取らない質問はenvから特徴量を取るべき×キーワードが分割されてしまった場合のリカバリ手段がない×気づきの判定×序盤のデザイン×プログラムの側から会話打ち切り×いいよどみ×ppoi×pkeicho-done-2021-02-05×keichobot_history×チャットボット×キーユースケース×pkeicho単語頻度×ソースコードの単語頻度×書き出しツールから呼び出す？×ローカル環境に移動？×pkeicho-mattermost-done×keicho-mattermostの状態遷移×keicho-cui:_kw_type×(2019/6)keicho学習×pkeicho-done→
- →立川_智也×主観的×チャットボット×もっと主観的なチャットボット×20191011立川西尾雑談メモ×好き嫌い×知識の表現形式がアップデートされなければならない×知識の表現形式のアップデート×ベクトル検索でつながる×連想のストック→
- →チャットボット×リアクティブ×自発的×知的生産×機械がscrapboxを読む×機械がscrapboxに書く×puppeteer×blu3mo×pythonでscrapboxにimport×heroku×headless_chrome×自動生成ページを自動削除する×scrapboxはフローの場ではなくストックの場→
- →リンクのサジェスト×足場ネットワーク×リンクサジェスト×キーフレーズ抽出×rake×scrapboxキーフレーズサジェスト×機械がscrapboxを読む×scrapbox擬似的多人数プロジェクト×蔵書横断検索×pKeicho→
- →聞き出しチャットシステム×keicho×pprojectindex×プロジェクトのタスク管理をscrapboxでやる×聞き出しチャット使い方サンプル×聞き出しチャットシステム会話ログ×聞き出しチャットシステムリリースノート×🤔scrapboxエクスポート時のフッタを指定可能にする×dynalist×□解説のスクリーンショットを取り直す×謎のログが途切れるバグが起きたので相談したい×終わりのデザイン×能動学習のうまくいかない話をしてたら本を読めという結論になった×🤔タスク管理チャットボット×🤔画面高さとバーチャルキーボードの問題×🤔httpだとクリップボードが使えない？×🤔選択肢回答だけを受け付ける×🤔モードの変更をメニューにつける？×pkeicho202103-202104done×質問がコマンドボタンを作れるようにする×会話ログ2021-01-30×質問自然度データセット×二つの引数をとる質問のチューニング×会話中に良し悪しフィードバック×regroupへワンクリックでインポート×対象として不適切なものを分析対象から除外するignoreファイル×フィードバックボタン:いいね×スコア=発展度,_not注目度×聞き出しチャットシステムのタスク整理版を作るとしたら×真昼の太陽×シンボルの関係が同一×部分観測マルコフ決定過程×会話ログ:状態遷移について×キーワードと質問の選択は内積注意×基本5質問の出現順番×write_learning_pair×キーワードを取らない質問はenvから特徴量を取るべき×キーワードが分割されてしまった場合のリカバリ手段がない×気づきの判定×序盤のデザイン×プログラムの側から会話打ち切り×いいよどみ×ppoi×pkeicho-done-2021-02-05×keichobot_history×チャットボット×キーユースケース×pkeicho単語頻度×ソースコードの単語頻度×書き出しツールから呼び出す？×ローカル環境に移動？×pkeicho-mattermost-done×keicho-mattermostの状態遷移×keicho-cui:_kw_type×(2019/6)keicho学習×pkeicho-done→
- →キーフレーズ抽出×名詞句アプローチ×動詞を許容するキーフレーズ×動詞を積極的にブラケティング×「情報の共有」を「情報共有」と関連づけたい×文中に出現しないキーフレーズ×単語出現頻度×ストップワード×共起×出現集中×tf-idf×idf×rake×textrank→
- →キーフレーズ抽出×kytea×極大部分文字列×sentencepiece×textrank×フレーズベースtf-idf×liblinear×active_learning×ページ単位df×PositionRank×scrapbox統計2019-2×フレーズベースTF-IDF: 名詞句解析の応用×大きすぎるリンクの問題×参加者の多いリンクに参加するのは有益ではない×遠くとつながるリンク×自動ブラケティング×文書が階層的×bitapアルゴリズム→
- →フレーズベースtf-idf×名詞句解析×tf-idf×キーフレーズ抽出×村脇_有吾×Conundrums in Unsupervised Keyphrase Extraction×textrank×単語ベースtf-idf×文法性→
"Engineer's way of creating knowledge" the English version of my book is now available on [Engineer's way of creating knowledge]
(C)NISHIO Hirokazu / Converted from [Scrapbox] at [Edit]