Automatizujte pomocí myši, klávesnice a akcí OCR (doporučeno pro automatizaci ve VDI)

V případech, kdy uživatel nemá přístup k prvkům uživatelského rozhraní webových aplikací nebo aplikací uživatelského rozhraní, a nemůže tedy automatizovat pomocí akcí prohlížeče nebo uživatelského rozhraní nebo záznamníků, důrazně doporučujeme použít alternativní metody automatizace, jako je použití obrázků nebo myš a klávesnici.

Metoda obrazu zachycuje části obrazovky, které se pak používají jako reference pro provádění kliknutí, odeslání textu a kliknutí myší. Automatizaci založenou na obrázcích lze zaznamenat buď pomocí obrazového záznamníku nebo vyvinut ručně. Přečtěte si více o tom, jak automatizovat používání obrázků v tomto tématu.

Naopak v případech, kdy obrázek nelze použít jako referenční bod, zvažte použití funkcí OCR k procházení obrazovky. Informace o schopnostech OCR naleznete v příslušném odkazu na akce.

V obou výše popsaných alternativách je nejlepší způsob navigace pomocí kliknutí myší a stisku kláves, které jsou vysvětleny v odkazu na akce.

Před vytvořením automatizace se ujistěte, že vhodné okno má fokus a je maximalizováno pomocí akcí Nastavit fokus v okně a Nastavit stav okna.

Snímek obrazovky akce Nastavit fokus v okně.

Pokud potřebujete před spuštěním akce počkat na načtení konkrétních součástí, použijte skupinu akcí čekání.

Akci Počkat použijte k čekání po stanovenou dobu, akci Počkat na obrázek k čekání na objevení / skrytí obrázku, akci Počkat na text na obrazovce (OCR) k čekání na objevení / skrytí textu.

Snímek obrazovky akce Počkat na text na obrazovce.

Chcete-li procházet webovou stránkou nebo aplikací a pracovat s jejími součástmi, použijte akce myši a klávesnice.

Nasaďte například akci Odeslat klávesy pro použití dostupných klávesových zkratek, nebo akce Přesunout myš na obrázek a Přesunout myš na text na obrazovce (OCR) pro přesun kurzoru na konkrétní obrázek nebo text.

Snímek obrazovky akce Přesunout myš na obrázek.

Chcete-li načíst text z obrazovky a uložit jej do proměnné, nasaďte buď akce schránky, nebo akci Extrahovat text pomocí OCR. Chcete-li uložit text do schránky, zvýrazněte text pomocí některé z akcí Odeslat klávesy nebo Odeslat kliknutí myší.

Akci Odeslat klávesy můžete konfigurovat tak, aby odeslala klávesovou zkratku Ctrl+A, která vybere veškerý text na webové stránce nebo v aplikaci.

Screenshot s akcí Odeslat klávesy.

Poznámka:

Více informací o automatizaci pomocí odesílání klávesových zkratek najdete v části Automatizace aplikací pomocí klávesových zkratek.

Případně můžete použít akci Odeslat kliknutí myší k odeslání stisku Levé tlačítko dolů na začátku textu, který chcete vybrat, a poté a stisku Levé tlačítko nahoru na konci.

Snímek obrazovky s akcí Odeslat kliknutí myší.

Po zvýraznění nasaďte akci Odeslat klávesy k odeslání klávesové zkratky Ctrl+C, která uloží vybraný text do schránky. Po uložení textu do schránky použijte akci Získat text schránky k uložení obsahu schránky do proměnné.

Snímek obrazovky akce Získat text ze schránky.