質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.49%

  • Java

    13818questions

    Javaは、1995年にサン・マイクロシステムズが開発したプログラミング言語です。表記法はC言語に似ていますが、既存のプログラミング言語の短所を踏まえていちから設計されており、最初からオブジェクト指向性を備えてデザインされています。セキュリティ面が強力であることや、ネットワーク環境での利用に向いていることが特徴です。Javaで作られたソフトウェアは基本的にいかなるプラットフォームでも作動します。

  • OpenCV

    1087questions

    OpenCV(オープンソースコンピュータービジョン)は、1999年にインテルが開発・公開したオープンソースのコンピュータビジョン向けのクロスプラットフォームライブラリです。

JAVAやOpenCVで作られたソフトでの画像の取込

解決済

回答 1

投稿

  • 評価
  • クリップ 0
  • VIEW 273

nikuman

score 1

前提・実現したいこと

ここに質問したいことを詳細に書いてください
(例)PHP(CakePHP)で●●なシステムを作っています。
■■な機能を実装中に以下のエラーメッセージが発生しました。

発生している問題・エラーメッセージ

あるPCソフト(以降PCソフトと記します)の画面を画像認識して操作を自動化するソフトを利用していたのですが、自動化ソフトのサポートが終了してしまいPCソフトのアップデートにより動作しなくなってしまいました。
どうやらPCソフトの画面表示が微妙に変化したようで(人間の目ではわからないのですがピクセル単位でメニューなどの文字表示の座標?が変わったようです)自動化ソフトに新たな画像を取り込めばある程度動くようにはなりそうなのですが、しかしながら私はソフト開発の経験など皆無で取り込み方がまったくわかりません。

私自身はソフト開発とは全く無縁で右も左もわからないのですが、自動化ソフトはJAVAで作られており、画像認識はOpenCVと言うものらしい事まではわかったもののググってみても画像取込の方法がさっぱりわかりませんでした。自動化ソフトはPCソフトのメニュー画面をキャプチャしその画像を二値化したものを利用しているらしいです。

自動化ソフトにはPCソフトのメニューなどが追加された時を想定してユーザー自身が画像を読み取る機能も付属しているのですが読取る座標が固定されているため、付属の読取機能では対処出来ませんでした。そこでご質問なのですが新たな座標位置に合わせて画像を読み込む方法を(例えばツールとかでしょうか)何方か教えていただけないかと思いご質問させて頂いております。私が無知なため専門家の方からすると説明が解り難い部分もあるかと思いますがどうかよろしくお願いします。

エラーメッセージ

該当のソースコード

ここにご自身が実行したソースコードを書いてください

試したこと

課題に対してアプローチしたことを記載してください

補足情報(言語/FW/ツール等のバージョンなど)

より詳細な情報

  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • yohhoy

    2017/10/13 13:14 編集

    あなたの質問は「自動化するソフト」固有の仕様に関する内容にみえます。購入されたソフトウェアであれば、購入元に問い合わせてみてはいかがでしょう。

    キャンセル

  • nikuman

    2017/10/13 13:19

    説明不足で申し訳ございません、購入元はサポート終了し連絡が付かない状態なのです。一般的な(と言う表現が正しいかわかりませんが)画像の取込方法やツールなどがわかればと思いご質問させて頂きました

    キャンセル

  • yohhoy

    2017/10/13 13:21 編集

    個人的な感想にすぎませんが、おそらくこの質問に対してあなたの期待する答えが得られることは無いように思えます。可能であれば、せめて該当ソフトウェアの名前くらい提示されては?(いずれにせよ、私は何も回答できませんが、誰か分かる方が登場するかもしれませんし)

    キャンセル

  • nikuman

    2017/10/13 15:38

    某事務機器リース会社のCTIソフトを自動化するソフトをオリジナルで作って貰ったものなので、名前をお伝えしても誰も知らないと思います。たぶん私が質問を投げたのがとても場違いだったんだと思います、ありがとうございました。

    キャンセル

回答 1

checkベストアンサー

+2

こんにちは。

teratailでは、どちらかと言うとエンジニア間での細かい技術的なことについての質問回答が多めのように思えますので、ご質問のような、運用上の要望に関してはなかなか回答がいただけないのかもしれません。

直接の回答にならないかもしれませんが、以下、少しでも参考になればと思い回答させていただくものです。

お使いの自動化ソフトはOpenCVのライブラリを利用してJavaで開発されたものとのことで、比較的良く見かける形態のソフトだと感じます。OpenCVとはかなり以前から使われている実績のある画像処理用ライブラリ(ライブラリとは、ソフトウェアの部品と思ってください)で、今では画像処理だけにとどまらない機能を持っています。OpenCVはJava に限らず、C言語やPyhon、その他のプログラミング言語で使いやすいようにカスタマイズと機能追加が常に行われています。

Javaで造られたその自動化ソフトは、Javaからでも使えるようにOpenCVに追加されたインターフェースを使って、OpenCVの機能を利用しています。画面のキャプチャーや画面の指定部分の切り出し、2値化して文字列の認識等を行っているのでしょう。

Javaを採用したのはおそらく、Windows や Mac, Linux等の別のOSでも使えるように、クロスプラットフォームでの利用を念頭に置いたものだと思います。

オープンソースのものですが、同じようなソフトに「Sikuli」があります。
Sikuli Script
もとはマサチューセッツ工科大学のUI研究グループのプロジェクトの成果だそうです。私も以前、少し使ってみたことがあるのですが、これもJavaベースのソフトで、画面をキャプチャーしたものをOpenCVで画像処理し、tesseractと言うOCR用ライブラリを使用して画像中の文字列を認識し、PC画面の操作を行っています。スクリプトを自分で書くことで、カスタマイズした操作を加えることもできます。

オリジナルのサイトは英語ですが、「sikuli 操作」等で検索すれば日本語での使用レビューがたくさんヒットしますので、ご興味があれば見てみてください。

ご質問の本題からそれましたが、nikuman様の「新たな座標位置に合わせて画像を読み込む方法」については、Windows でのご利用を前提としますが、例えば既存のツールですと各種の画面キャプチャーソフトが挙げられます。Windows では昔から定番な「WinShot」と言うものがありますし、その他にもたくさんあります。ソフトにもよりますがPCのデスクトップ全体、アプリのウィンドウ毎、指定の範囲でキャプチャーしたものを切り出すことができます。(WinShotもそうです)「Windows 画面キャプチャー ソフト」で検索してみてください。

ただし、nikuman様の最終的な要望である自動化ソフトと連携させるとなると、課題があるかもしれません。上記で挙げたような画面キャプチャーソフトは、キャプチャーするときに人間がキーボード等で指示を与えなければなりません。それでは自動化ソフトが必要とするときに必要な画像が与えられない、と言うことであれば、どうしてもそれ用のソフトを作成しなければならないことになります。また、自動化ソフトの方で外部のプログラムにタイミングを通知するような連携機能が無いと、これもまた難しい課題になるかと思います。この辺は自動化ソフトの機能によるので、現時点の情報では判断しかねる部分です。

自動化ソフトと言うものは、最近ではRPA(Robotic Process Automation)との言葉で良く取り上げられることが多いです。お使いの自動化ソフトの事情と具体的な要望を照らせて評価できるような、適切な方に直接相談してみるのもひとつの案かと思います。

投稿

編集

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2017/10/16 12:24

    dodox86様
    私の要領の得ない質問にも関わらずお答え頂きありがとうございます、とても分かり易く現段階での私の疑問が解消致しました。まずは教えていただいたツールで作業してみて前進してみようと思います。ありがとうございました。

    キャンセル

  • 2017/10/16 12:31

    コメントをいただきどうもありがとうございます。お役に立てたようで良かったです。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.49%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

関連した質問

  • 解決済

    byte配列のcv::Matへの画像変換

    byte配列に格納している画像データをMatに画像配列として保存します。この時、cv::imdecodeを使用しています。その後に画素値の変換をかけてcv::imencodeで再び

  • 解決済

    OpenCVのソースコードについての質問

    AndroidstudioでOpenCVを使いテンプレートマッチングを行いたいと考えています。サンプルが無いかと探した所下記のコードを発見しました。 inFIleはマッチングする

  • 解決済

    OpenCVを用いた物体検出

    現在OpenCV2.1を用いた上で顔検出にチャレンジしています。 学習等については問題なく行うことができ、顔の検出を行おうと思っているのですが、検出の段階で設定するパラメータの"m

  • 解決済

    EclipseでJava用のOpenCVのプログラムを動かしたい

    EclipseでJava用のOpenCVのプログラムを動かしたい Eclipseで2つの画像を比較した時のヒストグラム値を算出するというプログラムを動かしたいのですが、エラーが出て

  • 解決済

    Opencv3.XXのラベリング機能で面積情報を取得する方法(Java)

    JavaとOpencv3.1を使い、入力画像をラベリングし、一定面積以上の連結成分のみ残すプログラムを作成しています。 int nLabels = connectedcompo

  • 受付中

    opencvで画像の切り抜き

    添付のようなアパレルの画像から輪郭を抽出、切り抜きを実現したいのですが、 経験が少ないため、どのようにアプローチすべきか悩んでします。 下記サイトを参考にプロセスを考えま

  • 受付中

    カメラで撮影した画像を連番ファイルで保存したい

    キーを押すごとに撮影した画像をsampleフォルダに連番ファイルとして保存したいと思っています こちらを参考にしました http://naga-tsuzuki.sblo.jp/ar

  • 解決済

    C++、OpenCVを用いた画像処理

     前提・実現したいこと 画像検出のプログラムを書いているのですが全くできません。 内容は、「読み込んだ画像のある1点をクリックすると、そのクリックした点と同じような色部分を検出する

同じタグがついた質問を見る

  • Java

    13818questions

    Javaは、1995年にサン・マイクロシステムズが開発したプログラミング言語です。表記法はC言語に似ていますが、既存のプログラミング言語の短所を踏まえていちから設計されており、最初からオブジェクト指向性を備えてデザインされています。セキュリティ面が強力であることや、ネットワーク環境での利用に向いていることが特徴です。Javaで作られたソフトウェアは基本的にいかなるプラットフォームでも作動します。

  • OpenCV

    1087questions

    OpenCV(オープンソースコンピュータービジョン)は、1999年にインテルが開発・公開したオープンソースのコンピュータビジョン向けのクロスプラットフォームライブラリです。