IT Data 분석/빅 데이터 4

이미지 인식의 마법: 딥러닝으로 세상을 보는 눈 만들기

요즘 딥러닝과 머신러닝의 기술 공부 재미에 좀 빠져 있답니다. 하다가 보니 인간의 음성과 문자 뿐 아니라 이미지 인식에도많은 궁금증이 생기더라구요.오늘은 간단하게 딥러닝의 이미지 인식기술에 관련되어 간단하게 한자 적어보려 합니다. 가볍게 읽어보세요. 이미지 인식 기술은 컴퓨터가 사람처럼 이미지를 보고 이해할 수 있게 하는 기술입니다. 그 중심에는 딥러닝이라는 기술이 있습니다. 딥러닝은 뇌의 신경망을 모방해 데이터를 학습하는 인공지능(AI)의 한 분야로, 특히 이미지 처리에서 많은 성과를 이루고 있습니다.1. 딥러닝이란 무엇인가요?딥러닝은 인공 신경망(Artificial Neural Network)의 한 형태입니다. 우리가 이미지나 사진을 보면, 눈을 통해 들어온 정보가 뇌에서 처리되어 ‘이것은 고양이다’..

윈도우 메모리 포렌식: 디지털 증거를 찾는 기술

메모리 포렌식은 디지털 포렌식 중에서도 핵심적인 역할을 담당합니다. 특히, 윈도우 메모리 포렌식은 시스템의 동적 상태를 파악하고, 범죄 행위나 사이버 공격의 증거를 찾는 데 중요한 도구로 사용됩니다. 메모리 덤프를 통해 얻은 데이터를 분석함으로써 해커의 활동, 악성 코드, 숨겨진 프로세스, 그리고 네트워크 연결 정보를 추적할 수 있습니다. 이번 글에서는 윈도우 메모리 포렌식의 기초 개념과 주요 기술에 대해 알아보겠습니다.메모리 포렌식의 필요성디지털 범죄 수사에서는 흔히 하드 디스크의 정적 데이터를 분석하지만, 메모리 포렌식은 이보다 훨씬 더 많은 정보를 제공합니다. 메모리는 시스템의 실시간 상태를 저장하고 있어, 실행 중인 프로세스, 열린 파일, 네트워크 연결 및 암호화된 데이터 등이 담겨 있습니다. 이..

elasticsearch에서 indexing시의 문제점들

엘라스틱서치에서는 자체적으로 내부 인덱싱 파서와 검색 파서를 지정하여 사용된다. 더우기 더 문제가 되는 부분은 초기 데이터 템플릿을 명확하게 지정하지 않고 dynamic하게 지정되어 있을 경우, 동일한 필드의 인덱싱 타입이 달라(예: string, integer 가 동일 필드에 섞여 있을 경우) 필드 데이터가 string이 들어간 후 integer 타입이 추가 인덱싱되어 저장될 수 있으나, integer 타입 value가 인덱싱된 이후, string 타입이 인덱싱 될 수 없는 등의 세세한 문제점과 같이 고려해야 할 사항이 많다. 단순하게 파싱하고 정의한 후 끝이 아닌 새로운 큰 고민의 시작이라는 것을 알아본 하루.

ElasticSearch에 관하여

1. JVM installElasticsearch는 JVM(Java Virtual Machine)위에서 구동되기 때문에 JDK를 설치해야 운영이 가능하다. 다수의 리눅스 배포판에 설치되는 것을 기준으로 대부분의 리눅스에서 OpenJDK를 지원한다. Elaticsearch 를 위해서는 OpenJDK Version 1.8 이상의 버전을 설치해야 한다. 이를 위해서#yum install -y java-1.8.0-openjdk-devel.x86_64#java -version (openjdk version 확인)명령을 수행한다. 2. Elasticsearch install3. Elasticsearch Linux System Service 등록(서비스 등록후 시스템 부팅시 자동실행) 4. Elasticsearch ..