1. 분산처리 기반 데이터 수집기 개발

• 기능 설명: 데이터 수집기는 동시에 여러 프로세스에 의해 수집처리가 가능하도록 개발되었습니다. 이 프로그램은 다양한 명령어를 통해 데이터 수집 작업을 자동화하고 관리할 수 있도록 설계되었습니다. 사용자는 CLI에서 명령어를 입력하여 수집 작업을 시작하거나 특정 설정을 조정할 수 있습니다.

• 효과: CLI 기반의 시스템은 빠르고 유연한 데이터 수집이 가능하며, 스크립트를 통해 반복 작업을 자동화할 수 있어 작업의 효율성을 크게 높입니다. 또한, CLI 환경은 리소스가 적게 소모되어 서버나 로컬 환경에서 쉽게 실행할 수 있습니다.

2. 웹 인터페이스 제공

• 기능 설명: 사용자 편의를 위해 웹 기반의 인터페이스를 제공하여, 사용자가 데이터 수집과 분석 작업을 보다 직관적으로 관리할 수 있도록 지원합니다. 이 인터페이스는 수집 작업의 상태를 실시간으로 모니터링하고, 데이터 수집기의 설정을 변경하거나 수집된 데이터를 조회하는 기능을 제공합니다.

• 효과: 웹 인터페이스는 비전문가도 쉽게 사용할 수 있는 직관적인 환경을 제공하며, 관리자는 웹 브라우저를 통해 어디서나 데이터 수집과 분석 작업을 쉽게 관리할 수 있습니다. 이는 업무의 접근성과 관리 편의성을 높여줍니다.

3. DB 적재 및 CSV 변환 기능

• 기능 설명: 수집된 데이터는 먼저 데이터베이스(DB)에 1차적으로 적재됩니다. 이를 통해 원본 데이터를 안전하게 저장하고, 필요한 경우 CSV 형식으로 변환하여 외부로 제공할 수 있도록 합니다. CSV 변환은 데이터 분석, 보고서 작성, 외부 시스템으로의 전송 등을 위해 매우 유용합니다.

• 효과: 이 기능을 통해 데이터가 안전하게 저장되고, 다양한 포맷으로 쉽게 변환할 수 있어 분석 작업이나 외부 협업이 용이해집니다. 또한, 데이터의 일관성 유지 및 관리가 수월해집니다.

4. 클라우드 기반 정기 데이터 수집

• 기능 설명: 클라우드 서버를 사용하여 데이터 수집 작업을 정기적으로 자동 실행할 수 있습니다.  리눅스 및 유닉스 계열의 시스템에서 일정에 따라 명령어나 스크립트를 실행하여 데이터 수집 작업을 매일, 매주, 매월 등 정해진 주기에 맞춰 자동으로 수행합니다.

• 효과: 자동화된 정기 수집 기능을 통해 데이터가 지속적으로 최신 상태로 유지되며, 사람이 개입하지 않아도 데이터 수집이 정해진 시간에 정확히 이루어져 효율성이 높아집니다. 이는 데이터 수집의 신뢰성을 강화하며, 일관된 데이터 흐름을 보장합니다.

5. 데이터포털 OpenAPI를 활용한 상호금융 데이터 수집

• 기능 설명: 데이터포털의 OpenAPI(Application Programming Interface)를 활용하여 상호금융 데이터를 자동으로 수집합니다. OpenAPI는 외부 시스템과 프로그램이 서로 데이터를 주고받을 수 있도록 하는 인터페이스로, 이를 통해 신뢰할 수 있는 공공 데이터를 원활하게 수집할 수 있습니다.

• 효과: OpenAPI 연동을 통해 데이터 수집 작업이 자동화되고, 최신 데이터를 신속하게 확보할 수 있습니다. 이는 데이터 수집 과정에서의 오류를 줄이고, 최신 정보를 바탕으로 분석 및 의사결정을 내릴 수 있도록 합니다.

6. 텔레그램  챗봇(https://t.me/WIZICE_100_BOT)연계를 통한 모니터링 및 알림 기능

• 기능 설명: 텔레그램 메시징 서비스를 연계하여, 데이터 수집 작업의 상태를 모니터링하고 실시간으로 알림을 전송합니다. 수집 작업이 완료되었거나 오류가 발생했을 때 텔레그램을 통해 관련 알림을 관리자에게 전달하여 즉각적인 조치가 가능하도록 합니다.

• 효과: 실시간 알림 기능은 관리자에게 즉각적인 피드백을 제공하여 문제 발생 시 신속하게 대응할 수 있게 하며, 수집 작업이 정상적으로 수행되었는지 쉽게 확인할 수 있습니다. 이를 통해 데이터 수집 작업의 신뢰성과 안정성이 크게 향상됩니다.