不確実性を考慮した目標逆算型積み上げ式学習支援システム の履歴(No.4)

• 履歴一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• 不確実性を考慮した目標逆算型積み上げ式学習支援システム へ行く。
  • 1 (2025-02-12 (水) 11:31:01)
  • 2 (2025-02-12 (水) 14:11:46)
  • 3 (2025-02-17 (月) 11:45:50)
  • 4 (2025-02-26 (水) 12:52:22)
  • 5 (2025-02-26 (水) 14:56:46)
  • 6 (2025-02-26 (水) 18:43:24)
  • 7 (2025-02-27 (木) 12:15:04)
  • 8 (2025-03-10 (月) 11:05:30)
  • 9 (2025-03-27 (木) 23:11:17)
  • 10 (2025-03-28 (金) 18:09:05)

---

技術資料

勉強計画プログラムの引継ぎ 

python　3.11で実行確認済み

iie.lab.tpu.2324にアクセス．

中市のページを開く，それを前提にして話す．

MeCab 

MeCabについて 

MeCab は日本語の形態素解析エンジンの一つで、文章を単語（形態素）ごとに分割し、それぞれの品詞を解析するツール

• 高精度な解析：辞書を利用して単語の品詞を判定

• 軽量かつ高速：大規模なテキスト処理にも対応

• カスタマイズ可能：独自辞書を追加して特定の分野向けに最適化可能

MeCabは、自然言語処理の分野で広く利用されており、形態素解析が必要な検索エンジン、機械翻訳、テキストマイニングなどに役立つ

MeCab導入方法 

• Mecab をインストールする
  • Python に MeCab を pip した後に、PC本体にも入れる必要がある

    https://github.com/ikegami-yukino/mecab/releases/tag/v0.996

• パスを通しておく(システム環境変数の編集で変数Pathを編集する)

• 新規でmecab.exeがあるパスを追加する

  C:\Program Files\MeCab\bin\

  
  

MeCab導入確認 

• 下のMeCabテスト用のプログラムを実行して結果が出れば問題ない
  MeCab_test.ipynb

辞書の更新(MeCab) 

辞書(dic)について 

• どのような単位で単語を区切るかなどのルールを記したもの
• 辞書はなるべく頻繁に更新したほうがいい
  • デフォルトの辞書(2007年版？)では「進撃の巨人」に対して「進撃　の　巨人」という分析をしてしまう
    
  • 辞書を日々更新することで流行語などを正確に1つの単語として分析してくれる

辞書の更新方法 

文章から不必要な文字列を除去し，Mecabの辞書に基づいて単語単位に分割する

• インストールしたMecabには古い辞書しか入っていないので、NEologdという新しい辞書を追加する

• GoogleDrive(iie.lab.tpu.1920)の平松さんのページに行き、「neologd.zip」をDLする
• 解凍したneologdの中身のmecab-ipadic-neologdをdicのフォルダにコピーする

• dicの中でipadic-UTF8を作成しipadicの中身を全部コピぺする
• 同様に空のフォルダneologdも作成する

• 管理者権限でコマンドプロンプトを起動し(管理者として実行)，ipadic-UTF8のディレクトリに移動し，ipadicの中身をUTF8に変換する

  cd "c:\Program Files\MeCab\dic\ipadic-UTF8"
  mecab-dict-index -f utf-8 -t utf-8

• Neologdの辞書をコンパイルする

  cd "c:\Program Files\MeCab\dic\mecab-ipadic-neologd\seed"
  mecab-dict-index -d "c:\Program Files\MeCab\dic\ipadic-UTF8" -u NEologd.20200820-u.dic -f utf-8 -t utf-8 mecab-user-dict-seed.20200820.csv

• mecab-ipadic-neologdのフォルダ内に作られた「NEologd.20200820-u.dic」を先ほど作った空のneologdフォルダに移動させる

• Program Files/MeCab/etcの中にあるmecabrcをメモ帳で開き，下の一行を追加する

   ; userdic = /home/foo/bar/user.dic
  userdic = C:\Program Files\MeCab\dic\neologd\NEologd.20200820-u.dic

  • エラー対応（mecabrcを上書き保存する際、「アクセス許可がない」という旨のメッセージが出るとき
  • 右クリックでmecabrcのプロパティを開き、Usersの「書き込み」にチェックを入れる

スクレイピング関連 

スクレイピング.zipをダウンロード

このスクレイピングのところでエラーが出る場合は,Seleniumのバージョンが最新になってる可能性があるので4.1.0以降にする.(最新版だとプログラムの書き方が変わったから)

keyword.csvを書き換えると検索ワードが変化する．

Google Driver 

chromeを使ったスクレイピング，実際に画面が現れ遷移するのが特徴
chromeは勝手に更新するので常に最新版になっている
そのためdriverも常に更新し続けなければならない
ここからchromeのバージョンにあったものをダウンロードする
一回サイトの場所が変わってるので，また変わるかもしれない　注意
pipでインストールすることもできるだろうが，わかりやすいしスクレイピング実行ディレクトリに入れとくだけでもいい．
sakusei_sale.pyを実行

youtube api v3 

youtubeのスクレイピングを一瞬でできるapi

apiキー取得方法

このAPIキーを使用することによりプログラムを利用して動画情報やチャンネル情報の取得ができるようになる。

video_sakusei.py の api_key を取得したものに書き換えて実行

make_database.pyを実行することで，app.pyで使えるファイルに変化する。

例として作成したものが "教材データ.zip" である。

html作成関連 

膨大な量のhtmlが必要であるので繰り返しを使ってhtmlを作っている．

ドライブからhtml作成.zipをダウンロードする

first/html.pyは教材ページに飛ぶまでの中間地点をつくる．
派生するならここにキーワードを入れるといいとおもう．

second/kyouzai.pyは教材ページを作る

作科目単元カテゴリ，理解度作成.zipをダウンロードし， rikai_sakusei_?.pyを実行するとメインプログラム/app/templatesのrikai?.htmlが作成される．

メインプログラム 

メインプログラム.zipをダウンロード zipの中にはapp.pyやappf.pyがあるがappf.pyを実行する．

島崎のプログラムではなく,中市さんの学習支援システムを実行したい場合は中市さんのGoogledriveからzipファイルを持ってくるかapp.pyを実行すると中市さんのプログラムが動く.

python appf.py

で実行
その後ローカルホスト

http://127.0.0.1:5000

にアクセス．

実行できなかった時必要なモジュールを入れる．

実行後に、スクレイピング等を省略したい場合は "html作成サンプル.zip"，"教材データ.zip"をメインプログラム内に上書きすることで利用可能になる。

• html作成サンプル　→　html作成サンプル/templates を メインプログラム/templates に置き換え

• 教材データ　→　教材データ/教材 の中身を メインプログラム/Kamoku に置き換え

補足資料 

システム全体に関する解説資料

ドライブ内の動画を見て，システムの動きを確認
発表資料をみて，システムの大まかな動きを確認．
それでもいまいちわからなければ仕方ないので本論を確認．

システムの操作ガイド 

動画を閲覧してください！

ファジィ変数を用いたCPM 

以前までのプログラムでは与えられた数値によってCPMを計算していたがファジィ性を持たせるためにαカットしたCPMの結果を出すプログラムを追加した.

この画像はその追加したプログラムの一部である.どのような計算を行っているかの詳細が知りたい場合は島崎の卒業論文の本文を見ることでわかる.

この画像ではαカットの関数を定義して,LFやLSに対してupperとlowerの値を与えることによってCPMに不確実性（ファジィ)を追加して計算することができる.

対話型システム 

今回作成した対話型システムには多くの改善点があると思う.

この画像は対話型としてコマンドプロンプトに直接選択肢を渡す形式になっているのでここはホームページ上に乗るようにするほうが見栄えがよいと思う. また,対話型としては完ぺきではないので改善してほしい(願望)

実行例としては,勉強時間に対して単元ごとの時間を割り当てたときのどれくらい圧迫しているかという指標として圧縮率を提示してまた,その圧縮率に対応したスケジュールを提案してそれに応じたものをユーザーに選んでもらうという形になっている.

実際に使用したシステムの操作ガイド 

1. 新規登録

• ユーザーID、パスワード、ニックネームを入力し、アカウントを作成する。

2. ログイン

• 登録したユーザー情報を使用してログインする。
  

3. 学習可能時間の設定

• 画面右上で勉強可能な時間帯をクリックして選択し、入力が完了したら「合計時間を保存」ボタンを押して保存する。
  

4. テスト日程の追加

• 画面左下の「予定追加」ボタンを押し、表示される青いボックスをドラッグしてテスト日程に配置する。配置が完了したら、「書き込み」ボタンを押して保存する。

  #ref(): File not found: "wi3.png" at page "不確実性を考慮した目標逆算型積み上げ式学習支援システム"

5. 理解度チェック

• 「理解度チェック」ボタンを押し、好きな項目を選択する。単元バーを動かしたり、チェックボックスをつけたりして理解度を記録する。
  

6. スケジュール確認

• 再ログイン後、「スケジュール日程作成」ボタンを押し、表示されたカレンダーの日付をクリックしてスケジュールを確認する。

7. 対話型システム

• 理解度チェックを押すとコマンドプロンプトにスケジュールが提示される．その選択肢を選ぶとスケジュールが作成され,好きなスケジュールを選ぶことが出来る
  

中身