본문 바로가기
반응형

전체 글248

텍스트 체크 매크로 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.매크로에서 가장 많이 사용되는게 윈도우 화면을 분석해서 이미지를 인식하는 기술인데요.그 다음으로 많이 사용되는게 텍스트 또는 숫자 인식입니다.아직 OCR(Optical Character Recognition) 기능에 대해서 배우지 않았기 때문에 간단하게 어떤 기능인지만 알아볼께요.텍스트 체크 액션을 비즈니스적으로 어떻게 사용하는지 알아보려면 OCR과 변수를 같이 사용해야 합니다. 오토픽 에디터를 실행하고, 텍스트 체크 액션을 더블클릭해서 새 스크립트에 추가하세요.텍스트 체크 액션은 에디터의 좌측 하단에 있는 도구 상자 탭을 클릭하고, 조건 카테고리를 펼쳐보면 찾을 수 있습니다.   액션을 좀 더 쉽게 찾으려면 검색창에 액션의 이름을 입력하세요.아래 그림.. 2024. 8. 13.
3부 - 인공지능 매크로 모델 만들고 이미지 찾기 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.욜로 매치 액션은 YoloV8 딥러닝으로 학습된 모델을 사용합니다.먼저 개발 환경을 구성하고, 데이타셋을 만들어야 합니다. 그리고, 이 글을 참고해서 모델을 만들어야 사용이 가능합니다.[ 1. YoloV8 파이썬 개발 환경 구성 ][ 2. Yolo 데이타셋 라벨링 방법 ]※ 주의사항최소 300장 이상 학습해야 합니다. (몇장으로 학습해보고, 테스트 하려는 분들이 많은데요. 몇장으로 테스트 안됩니다.)pt 파일은 모델입니다. 모델은 학습이 완료된 후 만들어지는 결과 파일로 이미지를 분석해서 학습된 이미지를 찾는 알고리즘의 집합입니다.오토픽 매크로에서 사용하려면 pt 파일을 onnx로 변환해야 합니다. (오토픽이 아닌 Python과 같은 언어에서는 pt 파.. 2024. 8. 13.
2부 - 인공지능 매크로 학습 시키는 방법 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.욜로 딥러닝 데이타셋을 만드는 프로그램 종류가 상당히 많습니다.이미 검색해서 자신에게 맞는 프로그램을 사용하시는 분들도 계실텐데요.처음 접하시는 분들은 아래 링크에서 프로그램을 다운로드 받아서 실행 해보세요.더 편리한 프로그램이 있다면 추천 해주세요^^※ 아래 그림처럼 우측 중간쯤 release 링크가 있습니다. 이걸 클릭하세요.[ 욜로 마크 / 라벨링 프로그램 labelImg 다운로드 ]   아래 그림과 같이 windows_v1.8.1.zip 파일을 다운로드 받으세요. 프로그램명 뒤에 버전은 다를 수 있습니다.   다운로드 받은 파일의 압축을 풀면 아래와 같이 data 폴더와 labelImg.exe 실행 파일이 있습니다.   data 폴더 안에 라벨링.. 2024. 8. 13.
1부 - 인공지능 업무 자동화 매크로 환경 설정 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.오토픽 매크로에는 딥러닝 기능인 욜로 매치 액션이 포함되어 있습니다.욜로 매치를 이용한 딥러닝 이미지 검출 방법은 일반적인 이미지 매크로가 찾을 수 없는 이미지를 찾게 해줍니다.그리고, 손글씨나 캡챠(CAPTCHA)와 같은 자동 입력 방지 문자를 인식할 수 있습니다.실제로 오토픽 매크로의 딥러닝을 이용해서 자동 거래 방지 문자를 풀고, 몬스터를 인식해서 사냥하는등등... 실 사용에 응용하시는 분들이 많습니다.욜로 매치를 사용하려면 먼저 컴퓨터에 .NET 8을 설치해야 합니다. 설치 파일은 아래 링크에서 다운로드 하세요. Windows의 Arm64 또는 x64를 설치하세요.[ .NET 8 다운로드 ]   우선, 파이썬 개발 환경을 만들어야 하는데요. Py.. 2024. 8. 13.
이미지 전체 매치 (반대로 찾기, 반투명 이미지 찾기) 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.이전 시간에 화면 인식을 위한 이미지 서치와 이미지 매치에 대해서 알아봤습니다.오늘은 이미지 전체 매치를 알아볼건데요. 우선, 몇가지 설명을 하고 넘어가겠습니다.이미지 서치는 반투명 이미지, 반대로 찾기가 가능합니다. 이미지 매치도 반투명 이미지 찾기는 가능하지만, 반대로 찾기는 불가능합니다.그래서 이미지 매치 알고리즘을 사용하면서 화면의 좌상단부터 우하단으로 찾는게 아닌 우하단에서 좌상단으로 찾을 때 이 기능을 사용할 수 있습니다.또한, 이미지 서치가 할 수 없는 동일한 이미지 모두 찾기는 이미지 전체 매치만 처리할 수 있습니다.이렇듯 이미지 서치, 이미지 매치, 이미지 전체 매치 그리고, 욜로 매치는 하고 싶은 일에 따라서 선택적으로 사용해야 합니다.. 2024. 8. 13.
이미지 매치 (픽셀 색깔이 아닌 모양으로 찾는 방법) 안녕하세요. 업무 자동화 RPA 매크로 오토픽입니다.오늘은 이미지 서치에 이어서 이미지 매치에 대해 알아보도록 하겠습니다.이미지 서치와 이미지 매치는 동작 방식이 다르기 때문에 언제 어디에 서치 또는 매치를 사용하는게 좋을지 판단이 어려울 수 있습니다.이 카테고리의 글들은 오토픽 에디터의 액션을 학습하는 내용만 다루기 때문에 개념, 이론, 노하우 또는 제작 팁 같은것들은 팁과 노하우 게시판에서 자세하게 다루도록 하겠습니다. 오토픽 에디터를 실행하고, 좌측 하단의 도구 상자를 클릭하세요. 그리고, 조건 카테고리에서 이미지 매치 액션을 더블 클릭하세요.그러면, 새로운 스크립트가 자동으로 열리고 액션이 추가됩니다.   아래 파란색 숫자 1 아이콘을 마우스로 우클릭한 후 저장하세요.윈도우의 바탕화면에 1.jpe.. 2024. 8. 13.
반응형

티스토리툴바