Desafios de inspeção, identificação e automação de componentes VCL.
RPA em aplicações Delphi
Aplicações Delphi, especialmente as baseadas em VCL, podem apresentar um desafio importante para ferramentas de RPA: o componente visual existe, mas não necessariamente expõe uma árvore de acessibilidade rica ou um identificador estável para ferramentas externas.
Uma automação confiável precisa investigar mais do que a posição visual do controle. Dependendo do cenário, podem ser relevantes:
HWNDda janela ou controle;- classe Win32 registrada;
- texto visível;
- propriedade
Namedo componente; - relação entre owner e componentes filhos;
- tipo de controle;
- informações expostas por acessibilidade;
- dados presentes em estruturas internas da aplicação;
- versão do Delphi;
- arquitetura Win32 ou Win64.
Por que coordenadas não bastam
Automação baseada apenas em coordenadas é sensível a resolução, escala, posição da janela, temas, estados modais e alterações de layout. Ela pode ser útil como último recurso, mas não deve ser a estratégia primária.
O objetivo da investigação da RFLang é construir uma cadeia de resolução capaz de tentar identificadores mais fortes antes de recorrer a estratégias visuais ou posicionais.
Hipóteses de inspeção
Os protótipos investigam a possibilidade de combinar:
- informações de janela e mensagens do Windows;
- propriedades acessíveis por RTTI ou mecanismos de inspeção;
- nomes e relações entre componentes;
- padrões observados em estruturas internas da VCL;
- matrizes de offsets dependentes de versão e bitness;
- evidências do executável PE quando necessário.
Os itens 4 e 5 são especialmente sensíveis à versão e à implementação. Não devem ser tratados como contrato universal do Delphi.
UPX não é um adaptador Delphi
A presença de UPX pode fornecer evidências sobre o empacotamento ou a estrutura do executável, mas não transforma UPX em um mecanismo de descoberta de componentes. Ele deve ser tratado como evidência auxiliar do PE, e não como um terceiro adaptador de automação.
Estado atual
Esta página registra investigação e direção arquitetural. A RFLang 0.1 não deve prometer inspeção universal de aplicações Delphi. Os resultados precisam ser validados em uma matriz de versões, arquiteturas, bibliotecas e estilos de compilação.
Próximos experimentos
- comparar aplicações Delphi VCL com e sem informações de acessibilidade;
- registrar quais propriedades permanecem estáveis entre versões;
- validar a relação entre
HWND, classe,Namee owner; - medir o comportamento em Win32 e Win64;
- documentar falsos positivos e falsos negativos;
- definir quando uma evidência é forte o suficiente para gerar um locator.