モンハンライズの護石を画像認識してテキスト化します。
護石が多すぎて管理しきれない、護石テーブルを自分で確かめたいけど手動でスキル内容を打ち込むのは面倒・・・という方に需要があるかと思い作りました。
#モンハンライズ #MHR #MHRise #護石 #護石認識 #文字認識 #画像認識 #自動化 #手動 #テキスト化 #OpenCL
GOSEKIcapture2.exeを起動します。
すると白いウィンドウの他に緑色の枠がでます。これもウィンドウなのでマウスドラッグで移動できます。
緑の枠をプレイ動画などのキャプチャシーンに合わせます。
このときプレイ画面は1920×1080でないと枠に合いません。Nintendo Switchの録画ボタンで録画した動画の場合1280×720なので、手動で動画サイズを引き伸ばすなりして下さい。
なるべく1920×1080に近づけて、枠も護石内容の文字がおさまるようにしてください。ここがアバウトだと認識精度に影響します。
スライドバーを左右に移動させて適切なカットオフ値にして下さい。
下の画像のようにカットオフ値がMaxの場合、認識性能は上がりますが計算が重くなり、キャプチャフレームレートに影響します。
認識しないよりはマシなので基本カットオフ値Maxで良いと思います。護石のスキル候補が下に表示されます。
スキル名と、そのスキルの可能性が数値で表されます。数値は低いほど可能性が高いという意味です。
例えば「水属性攻撃強化」と「氷属性攻撃強化」は文字が非常によく似ているのでどちらも候補に出現することがありますが、より可能性の高いほうが採用されているのが数値を見て分かったりするので、眺めているだけでも楽しいです(人によります)。
「←」と書いてあるボタンを押すとmesbox(テキスト画面)が消えます。
テキスト内容に変更があったら常に更新をかけるので地味にフレームレートに影響することがあるので一応つけました。
もちろんテキスト画面Offにしても護石認識は機能します。
テキスト出力は , 区切りで
「スキル名1,Lv,スキル名2,Lv,スロA,スロB,スロC」
となっています。
約1000～1500個以上の護石をリストアップすると、文字数が32768(2の15乗)を超えて正しく表示されなくなるバグがあります。
これは表示だけの問題であり、ソフトの内部では正しい文字列で記憶されています。Escキーを押してソフトを終了することにより正しい文字列が「テキスト出力.txt」という名前で保存されます。
これは正しく表示されているときですが、「重複を数える」というチェックボックスや矢印のボタンが正しく表示されない場合があります。
その場合ディスプレイの表示スケールの設定を100%に変更して下さい。
これが150%とか200%だと微妙にUIが崩れてしまうことはありますが、ソフトの機能自体に不具合が起こることはありません。
装飾品のせいでスロ3がスロ1に誤認識されてしまうことがあります。
そのうち修正します。
GOSEKIcapture ver2からOpenMPではなくOpenCLを使って計算をしています。
お使いのPCが古い場合「HSPCL64.dllがありません」といったようなエラーが出ると思います。
ごみおまの前にそのごみPCを捨てましょう
ver1を別フォルダに残しているのでそちらを起動してみて下さい。
HCLGetDeviceInfo.exeを起動するとOpenCLデバイスが列挙されます。
使いたいGPU,CPUのデバイスidをGOSEKIcapture2Setting.txtの2行目に記載することで、任意のデバイスで計算を行うことができます。
GOSEKIcapture2.exeを起動すると、計算時間がタイトルバーに表示されます。単位はマイクロセカンド(us)です。
OpenCLデバイスがない場合、HCLGetDeviceInfo.exeを起動してもデバイスが列挙されませんので、確認用に使いこともできます。
テンプレートマッチングみたいなことをやってます。
そのうちディープラーニングで認識精度と速度の両立を図りたい・・・
2021/5/23 ver 2.1 スキル以外の文字でも認識してしまう問題を修正
2021/5/14 ver 2.0 テンプレートマッチング計算部分をOpenCLに移植して高速化
2021/5/3 ver 1.11 重複を数えない設定を追加
2021/5/3 ver 1.10 達人芸を対応。出力文字数が32767を超えるとバグるのを修正
2021/5/2 ver 1.0 公開
ver2CUIフォルダにあります。
他のソフトから起動されることを想定されたソフトです。(こちらも自由に再配布可能です。)
コマンドライン引数に画像ファイル名を指定することで、スキル認識を行い結果をテキストで出力します。
GOSEKIcapture2_CUI:ファイル名を１つずつコマンドライン引数に指定することで動きます。
GOSEKIcapture2_CUI_Folder:フォルダ名を１つコマンドライン引数に指定することで動きます。
画像ファイルは
・png
・jpg
・bmp
形式をサポートしています。
解像度は1920x1080や1280x720の16:9画像が対応しています。
実行形式ですが、例えばこのような形で実行することができます。
・GOSEKIcapture2_CUIのほう
・GOSEKIcapture2_CUI_Folderのほう
結果出力は下記のようになります。
実行ファイルと同じ階層に出力されます。
↓これはデバッグ機能みたいなものです。
実際にキャプチャされた部分が切り出されて出力されます。
またソフト内で引数がどのような文字列で処理されたかも見ることができます。
GOSEKIcapture2Setting.txtの座標数値を変えることで任意の座標からの読み取りが可能になります。
デフォルトでは
このシーンの読み取りを行う設定になっています。
もし装備画面のシーンなら下記のよう切り取り位置の設定を変えてください。
読み取り左上x座標
1514
読み取り左上y座標
218