不同时期、不同类型的企业信息化软件间往往缺少集成接口和已知格式的外部数据而难于集成。如人们不得不经常进行产品设计数据、工艺数据的批量导入导出、手工抄录等重复单调的工作，以保证信息互通。利用界面信息提取和模拟人工界面操作自动化完成这些单调重复性工作通常是可行的。本文提出一种基于屏幕显示内容辨识界面元素的方法，从而实现界面显示信息的分检、界面元素的定位，即可根据业务流程需要自动地操作界面，实现软件间的信息互传与互动。