Интерфейс

humanemulator.net — справка. Продукт, демо и покупка — на хуманэмулятор.рф | Демо | Купить | API | лог изменений

get_pos_in_webpage_picture

get_pos_in_webpage_picture($picture_filepath,$similar_koeff=0.95,$similar_algoritm=5); - получить координаты заданного изображения на текущей странице (доступна с версии 7.0.3)

Функция на вход принимает параметры:

$picture_filepath – путь к файлу изображения
$similar_koeff – коэффициент подобия (от 0 до 1) - доступен с версии 7.0.3
$similar_algoritm – алгоритм поиск аподобия (от 0 до 5) - доступен с версии 7.0.3 :
- 0 - R(x,y)=sumx',y'[T(x',y')-I(x+x',y+y')]2 - Squared difference (разница в квадрате)
- 1 - R(x,y)=sumx',y'[T(x',y')-I(x+x',y+y')]2/sqrt[sumx',y'T(x',y')2 sumx',y'I(x+x',y+y')2] - (нормальзованая разница в квадрате)
- 2 - R(x,y)=sumx',y'[T(x',y') I(x+x',y+y')] - Cross correlation (корреляция)
- 3 - R(x,y)=sumx',y'[T(x',y') I(x+x',y+y')]/sqrt[sumx',y'T(x',y')2 sumx',y'I(x+x',y+y')2] - Normalized cross correlation (нормальзованая корреляция)
- 4 - R(x,y)=sumx',y'[T'(x',y') I'(x+x',y+y')], where T'(x',y')=T(x',y') - 1/(wxh) sumx",y"T(x",y") I'(x+x',y+y')=I(x+x',y+y') - 1/(wxh) sumx",y"I(x+x",y+y") - Cosine coefficient (косинусный коэффицент)
- 5 - R(x,y)=sumx',y'[T'(x',y') I'(x+x',y+y')]/sqrt[sumx',y'T'(x',y')2 sumx',y'I'(x+x',y+y')2] - Normalized cosine coefficient (нормализованый косинусный коэффицент)

После отработки функция возвращает результат своей работы в скрипт :

pos – координаты заданного изображения на странице (XHEPosition : pos->x и pos->y)

Пример использования

<?php
// Scenario: Get position coordinates of an image within a webpage screenshot

$xhe_host = "localhost:7010";
if (!isset($path)) {
  // Path to the init.php file for connecting to the XHE API
  $path = "../../../Templates/init.php";
  // Including init.php grants access to all classes and functionality for working with the XHE API
  require($path);
}

// Start
echo "\n<font color=blue>webpage->" . basename(__FILE__) . "</font>\n";

// Define screenshot name
$screenName = "test/kak.png";

// Step 1: Navigate to test site
echo "1. Navigate to website for which we have a screenshot: ";
echo WEB::$browser->navigate(TEST_SITE_URL) . "\n";

// Example 1: Get position of image in browser screenshot
echo "2. Get coordinates of image in browser screenshot: ";
$pos = WEB::$webpage->get_pos_in_webpage_picture($screenName);
echo "top left corner of image $pos->x x $pos->y\n";

// Step 2: Move mouse to position
echo "3. Move mouse to specified position: ";
echo $mouse->move($pos->x, $pos->y) . "\n";
$app->pause(0);

// Step 3: Navigate to another site
$url2 = "https://vk.com/soft_seo";
echo "4. Navigate to website for which we have a screenshot: ";
echo WEB::$browser->navigate($url2) . "\n";

// Example 2: Get position with similarity and tolerance
$similarity = 0.86;
$tolerance = 4;
echo "5. Get coordinates of image in browser screenshot: ";
$pos = WEB::$webpage->get_pos_in_webpage_picture($screenName, $similarity, $tolerance);
echo "top left corner of image $pos->x x $pos->y\n";

// Step 4: Move mouse to position
echo "6. Move mouse to specified position: ";
echo $mouse->move($pos->x, $pos->y) . "\n";

// End
echo "\n";

// Quit the application
WINDOW::$app->quit();

# Additional paths
import sys
sys.path.insert(0, '../../../Templates PY/')

xhe_host = "127.0.0.1:7070"
from xweb_human_emulator import *

# начало
echo("<hr><font color=blue>webpage.xxxxxxxxx</font><hr>")

# имя скриншота
screen_name="test\\kak.bmp"
if browser.get_model()=="chromium":
  screen_name="test\\kak1.bmp"

# 1 
echo("1. Перейдем на сайт, с котрого у нас есть скриншот : ")
echo(browser.navigate("http://rpa-bot.ru/wiki/"),"<br>")

# 2 
echo("2. Получим координаты картинки в картинке браузера : ")
pos = webpage.get_pos_in_webpage_picture(screen_name)
echo("левый верхний угол картинки "+str(pos.x)+" x "+str(pos.y)+"<br>")

# 3 
echo("3. Щелкнем в заданном месте  : ")
echo(mouse.move(pos.x,pos.y),"<br>")

# 4 
echo("4. Перейдем на сайт, с котрого у нас есть скриншот : ")
echo(browser.navigate("http://vk.com"),"<br>")

# 5
echo("5. Получим координаты картинки в картинке браузера : ")
pos = webpage.get_pos_in_webpage_picture(screen_name,0.8,4)
echo("левый верхний угол картинки "+str(pos.x)+" x "+str(pos.y)+"<br>")

# 6
echo("6. Щелкнем в заданном месте  : ")
echo(mouse.move(pos.x,pos.y),"<br>")

# конец
echo("<hr><br>")

# Quit
app.quit()

#region using

using System;
using System.Diagnostics;
using System.Collections.Generic;
using System.Linq;
using System.IO;
using System.Text;
using System.Threading;

using XHE;
using XHE.XHE_DOM;
using XHE.XHE_System;
using XHE.XHE_Window;
using XHE.XHE_Web;

using System.Drawing;

#endregion

 class Program:XHEScript
 {
	  static void Main(string[] args)
	  {
			// init XHE
			server = "localhost:7010";
			InitXHE();

			// начало
			echo("<hr><font color=blue>webpage.get_x_in_webpage_picture</font><hr>");
				
			// имя скриншота (ссылка Кратко)
			string screen_name="test\\kak.bmp";
			if (browser.get_model()=="chromium")
				screen_name="test\\kak1.bmp";

			// 1 шаг
			echo("1. Перейдем на сайт, с котрого у нас есть скриншот : ");
			echo(browser.navigate("https://rpa-bot.ru/wiki/")+"<br>");
						
			// 2 шаг
			echo("2. Получим координаты картинки в картинке браузера : ");
			Point pos=webpage.get_pos_in_webpage_picture(screen_name);
			echo("левый верхний угол картинки "+pos.X+" x "+pos.Y+"<br>");
			
			// 3 шаг
			echo("3. Перейдем в заданное место : ");
			echo(mouse.move(pos.X,pos.Y)+"<br>");
            sleep(2);

			// 4 шаг
			echo("4. Перейдем на сайт, с котрого у нас есть скриншот : ");
			echo(browser.navigate("vk.com")+"<br>");
						
			// 5 шаг
			echo("5. Получим координаты картинки в картинке браузера : ");
			pos=webpage.get_pos_in_webpage_picture(screen_name,0.9,0);
			echo("левый верхний угол картинки "+pos.X+" x "+pos.Y+"<br>");
			
			// 6 шаг
			echo("6. Перейдем в заданное место : ");
			echo(mouse.move(pos.X,pos.Y)+"<br>");

			// конец
			echo("\n\n");

			app.quit();            
	  }
}

// подключим функциональные объекты, если еще не подключен
xhe_host="127.0.0.1:7070";
echo=require("../../../Templates JS/init.js");

// начало
echo("<hr><font color=blue>webpage.get_y_in_webpage_picture</font><hr>");

// имя скриншота
screen_name="test\\kak.bmp";
if (browser.get_model()=="chromium")
  screen_name="test\\kak1.bmp";

// 1 шаг
echo("1. Перейдем на сайт, с котрого у нас есть скриншот : ");
echo(browser.navigate("https://rpa-bot.ru/wiki/")+"<br>");

// 2 шаг
echo("2. Получим координаты картинки в картинке браузера : ");
var pos=webpage.get_pos_in_webpage_picture(screen_name);
echo("левый верхний угол картинки "+pos.x+" x "+pos.y+"<br>");

// 3 шаг
echo("3. Щелкнем в заданном месте  : ");
echo(mouse.move(pos.x,pos.y)+"<br>");
app.sleep(2);

// 4 шаг
echo("4. Перейдем на сайт, с котрого у нас есть скриншот : ");
echo(browser.navigate("http://vk.com")+"<br>");

// 5 шаг
echo("5. Получим координаты картинки в картинке браузера : ");
var pos=webpage.get_pos_in_webpage_picture(screen_name,0.9,0);
echo("левый верхний угол картинки "+pos.x+" x "+pos.y+"<br>");

// 6 шаг
echo("6. Щелкнем в заданном месте  : ");
echo(mouse.move(pos.x,pos.y)+"<br>");

// конец
echo("\n");

// Quit
app.quit();

=============================================
Webpage Объекты DOM System Vision Web Window
=============================================
если что-то непонятно или необходимо узнать или считаете что надо добавить по работе этой функции, пишите в комментарии или на наш форум
.

Интерфейс

get_pos_in_webpage_picture

Функционал