Java在屏幕上找到图像

Question

你们可以给我一些关于如何在屏幕上找到图像的提示。我的意思是，一个简单的像素组合。例如，它找到30x30像素白色方块的坐标。

Java机器人类允许我找到某个像素的颜色。但是我需要与之相反，我希望我的程序能够扫描我的屏幕，然后告诉我这个小图像的坐标。那么我可以通过所有的像素与机器人，但它应该比这更快。快多了。

有什么建议吗？

Answer 1

那么我可以通过与机器人的所有像素，但它应该比这更快。快多了。

恐怕这正是你必须要做的。

如果所有像素都应该是白色，则可以先采用30像素宽的步骤，如果您找到白色像素，则采取5像素级，然后如果这些像素也是白色，则检查方块中剩余的像素。

事情是这样的：

.  .  .  .  .  . 



.  ..........  .  .  . 
     ...... 
     . . . . 

     . . . . 
.  .  .  ..........  . 
          .......... 
          .......... 
          .......... 
          .......... 
.  .  .  .......... 

Answer 2

其实，还有一个更simpliler或更可靠的解决方案这一点。您可以在Java应用程序内部实现Sikuli库，以在屏幕上找到图像元素并与它们交互。它旨在自动化UI测试，但我认为它可以很容易地满足您的需求。

示例应用程序（source）：

import java.net.MalformedURLException; 
import java.net.URL; 

import org.sikuli.api.*; 
import org.sikuli.api.robot.Mouse; 
import org.sikuli.api.robot.desktop.DesktopMouse; 
import org.sikuli.api.visual.Canvas; 
import org.sikuli.api.visual.DesktopCanvas; 

import static org.sikuli.api.API.*; 

public class HelloWorldExample { 

    public static void main(String[] args) throws MalformedURLException { 

      // Open the main page of Google Code in the default web browser 
      browse(new URL("http://code.google.com")); 

      // Create a screen region object that corresponds to the default monitor in full screen 
      ScreenRegion s = new DesktopScreenRegion(); 

      // Specify an image as the target to find on the screen 
      URL imageURL = new URL("http://code.google.com/images/code_logo.gif");     
      Target imageTarget = new ImageTarget(imageURL); 

      // Wait for the target to become visible on the screen for at most 5 seconds 
      // Once the target is visible, it returns a screen region object corresponding 
      // to the region occupied by this target 
      ScreenRegion r = s.wait(imageTarget,5000); 

      // Display "Hello World" next to the found target for 3 seconds 
      Canvas canvas = new DesktopCanvas(); 
      canvas.addLabel(r, "Hello World").display(3); 

      // Click the center of the found target 
      Mouse mouse = new DesktopMouse(); 
      mouse.click(r.getCenter()); 
    } 
} 

另见How to use Sikuli inside your Java programs进行安装。