2025/8/31の研究ログ
今日はIDのエラーを解決する
missing_fileの要素を除外し,filter_*.tsvを作成
test_tsvをそちらに変更
これで上手く動くはず!
ダメだった
が,エラーの内容が変わった
変更前 > Y0cH_NlhhMAs_30.000_40.000
変更後 > Y0kAaPH2wrvM_140.000_150.000
これならいけそう
ダメだった
同じkeyerrorが出る
Y0kAaPH2wrvM_140.000_150.000
missing_file自体がおかしいみたい?
missinf_file以外のファイルもない
validation.tsvにはY0kAaPH2wrvM_140はあるが,missinf_fileにはない
しかしls ../../data/dcase/dataset/audio/validation/validation | grep Y0kAaPH2wrvM_140で見つからない
find ../../data Y0kAaPH2wrvM_140.000_150.000.wavでもダメ
試しに他のファイルを検索する
Y0eh_N-cmcuI_350.000_360.000.wavはあった
findでは出ないが, ls | grepなら出る
findの使い方を僕が分かっていないだけかも
仕方ないので,filter_validation.tsvからY0kAaPH2wrvM_140*を消した
これで回してみよう
keyerrorが出た > Y1NbotQwFUTg_30.000_40.000
違和感があったのでローカルで検索すると,確かにダウンロードしていた
後からダウンロードできたみたい
存在しているのでmissing_fileに記述がなかった
送信し直せば良さそう
scpが終わったら,再度filter_*.tsvを二つ作り,学習してみる
電源に繋いでいなかったせいでコネクションが途切れた
rsyncでファイルの内容を同じにする
なぜかtrainでKeyerrorを起こすようになった
rsyncでファイル構造が変わったのかな?
検証もしたくないので,一度ファイルを削除してもう一回scpする
scpが終わったがエラーが続く
確かに,埋め込みをやり直していない
もう一回やるか
やっと動いた!
epoch1の結果が出た!
timeで時間を測ろう
real 5m7.151s
user 6m11.594s
sys 0m56.492s
通常の設定で学習させてみよう
code: res
┃ Runningstage.testing metric ┃ DataLoader 0 ┃
┡━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━╇━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
│ test/student/collar_f1_macro_thres05/sed_eval │ 0.00027229406987316906 │
│ test/student/collar_f1_macro_thres05/sed_scores_eval │ 0.0002722940776038121 │
│ test/student/intersection_f1_macro_thres05/psds_eval │ 0.002728512960436562 │
│ test/student/intersection_f1_macro_thres05/sed_scores_eval │ 0.00027266530334014993 │
│ test/student/loss_strong │ 0.613642156124115 │
│ test/student/psds1/psds_eval │ 0.0 │
│ test/student/psds1/sed_scores_eval │ 0.0 │
│ test/student/psds2/psds_eval │ 0.0 │
│ test/student/psds2/sed_scores_eval │ 0.0 │
│ test/student/segment_f1_macro_thresopt/sed_scores_eval │ 0.2183358436580617 │
│ test/student/segment_mauc/sed_scores_eval │ 0.6021505413866496 │
│ test/student/segment_mpauc/sed_scores_eval │ 0.11904848572418461 │
│ test/teacher/collar_f1_macro_thres05/sed_eval │ 0.0008839268120937049 │
│ test/teacher/collar_f1_macro_thres05/sed_scores_eval │ 0.0008839268293463067 │
│ test/teacher/intersection_f1_macro_thres05/psds_eval │ 0.011001592862193278 │
│ test/teacher/intersection_f1_macro_thres05/sed_scores_eval │ 0.0032960593362118887 │
│ test/teacher/loss_strong │ 0.6335580348968506 │
│ test/teacher/psds1/psds_eval │ 0.0 │
│ test/teacher/psds1/sed_scores_eval │ 0.0 │
│ test/teacher/psds2/psds_eval │ 0.0 │
│ test/teacher/psds2/sed_scores_eval │ 0.0 │
│ test/teacher/segment_f1_macro_thresopt/sed_scores_eval │ 0.21329184430027945 │
│ test/teacher/segment_mauc/sed_scores_eval │ 0.5883277355437171 │
│ test/teacher/segment_mpauc/sed_scores_eval │ 0.10669785111154173 │