工業技術研究院

技術簡介

此技術發展以No-Code RPA編輯器編寫的使用者介面操作步驟，可同時支援影像線上串流及離線影片檔進行操作流程編輯。透過影像分析及IP-KVM技術，軟體可依預先設定的步驟執行遠端的介面操作及解析畫面相關資訊，解析取得的資訊支援現行通訊交換標準(例如：HTTP、MQTT、OPC UA)。

Abstract

This technology develops user interface operation steps written in the No-Code RPA editor, which can simultaneously support online image streaming and offline video files for operation process editing. Through image analysis and IP-KVM technology, the software can execute remote interface operations and analyze screen-related information according to pre-set steps. The information obtained through analysis supports current communication exchange standards (for example: HTTP, MQTT, OPC UA).

技術規格

提供專案管理、低代碼流程編輯、5種控制、邏輯運算等4大功能；最多每秒可以處理 20 FPS; 透過AI訓練可分辨不同字型及字彙，從圖像中識別文字的準確率為90％

Technical Specification

It provides four major functions, including project management, low‑code workflow editing, five types of control, and logical operations. It can process up to 20 FPS, and through AI training, it can distinguish different fonts and vocabularies, achieving a 90％ accuracy rate in text recognition from images.

技術特色

此技術發展以No-Code RPA編輯器編寫的使用者介面操作步驟，可同時支援影像線上串流及離線影片檔進行操作流程編輯。透過影像分析及IP-KVM技術，軟體可依預先設定的步驟執行遠端的介面操作及解析畫面相關資訊，解析取得的資訊支援現行通訊交換標準(例如：HTTP、MQTT、OPC UA)。

應用範圍

製造業需進行人機畫面自動操作之行為或老舊機台畫面資訊擷取

接受技術者具備基礎建議（設備）

IPC

接受技術者具備基礎建議（專業）

機械人才、電機人才、資工人才

聯絡資訊