임이지의 블로그

시계열(時系列, 영어: time series)은 일정 시간 간격으로 배치된 데이터들의 수열을 말한다. 시계열 해석(time series analysis)라고 하는 것은 이런 시계열을 해석하고 이해하는 데 쓰이는 여러 가지 방법을 연구하는 분야이다. 예컨대, 이런 시계열이 어떤 법칙에서 생성되어서 나오느냐는 기본적인 질문을 이해하는 것이 궁극적인 목표라고 할 수 있다. 시계열 예측(time series prediction)이라고 하는 것은 주어진 시계열을 보고 수학적인 모델을 만들어서 미래에 일어날 것들을 예측하는 것을 뜻하는 말이다. 일반적으로 이런 방법들은 공학이나 과학계산, 혹은 금융시장에서의 주가 예측 등에서 많이 쓰인다. 시계열 데이터를 분석하는 수학적 모델은 여러 가지가 있을 수 있는데, 실제 ..

AI/용어 2021. 6. 7. 12:19

OLTP 온라인 거래 처리 여러 단말에서 보낸 메시지에 대해 호스트 컴퓨터가 DB 접근 및 처리 결과 반환함 데이터 갱신을 위주로 진행하는 Processing OLAP 온라인 분석 처리 정보 위주의 분석 처리 다양한 비즈니스 관점에서 쉽고 빠르게 다차원적 데이터에 접근하여 의사결정에 활용할 수 있는 정보를 제공해주는 기술 데이터 조회를 위주로 진행하는 Processing BI 데이터를 통합/분석하여 기업 활동에 연관된 의사결정을 돕는 프로세스를 말한다. 데이터 기반 의사결정을 지원하기 위한 리포트 중심의 도구이다. BA 데이터 통계를 기반으로 성과에 대한 이해와 비즈니스 통찰력에 초점을 둔 분석 방법이다 데이터 사이언스 컴퓨터공학, 통계학, 수학 등의 학문적 지식은 물론 시각화 및 해커로서의 소양에 이르..

AI/빅데이터 2021. 5. 21. 16:27

Q. 데이터 베이스 구성요소로 용어와 의미가 바르게 연결된 것은? A. 메타데이터, 인덱스 메타데이터란? 데이터에 대한 데이터라고도 불리우며 대량의 정보 가운데 찾고 있는 정보를 효율적으로 찾아내서 이용하기 위해 일정한 규칙에 따라 콘텐츠에 부여되는 데이터. 데이터 및 구조화된 정보를 분석, 분류하고 부가적 정보를 추가하기 위해 그 데이터 뒤에 함께 따라가는 정보. 인덱스란? 원하는 형태의 배열과 찾아보기를 가능하게 해주는 기능으로 색인 또는 목록이라는 의미한다. 데이터를 기록할 경우 그 데이터의 이름, 데이트 크기 등의 속성과 그 기록장소 등을 표시한 것(참조용의 데이터) SOW(Statement of work) 작업 지시서, 고객의 요구 사항 및 프로젝트의 결과 등을 상세히 기술해 놓은 명세서. 데이..

AI/빅데이터 2021. 5. 19. 18:30

Q. 사생활 침해에 따른 포괄적인 해결책으로 적절한 것은? A. 개인정보 사용자의 책임 사생활 침해 특정 데이터가 본래 목적 외에 가공 처리 되 2차 3차 목적으로 활용될 가능성이 증가하면서 위험의 성격도 사생활 침해를 넘어 사회, 경제적 위협으로 변형될 수 있다는 점에서 더 큰 우려를 내포하고 있음. 이러한 상황 방지하기 위해 사생활 침해와 관련하여 데이터에 포함된 개인 식별 정보를 삭제하거나 알아볼 수 없는 형태로 변환하는 익명화 기술이 발전함. 책임 원칙 훼손 영화 '마이너리티 리포트'는 범죄 예측 프로그램에 의해 범행을 저지르기 전에 체포되는 내용임. 빅데이터 기반 분석과 예측 기술을 발전하면서 정확도가 증가한 만큼, 분석 대상이 되는 사람들은 예측 알고리즘의 희생양이 될 가능성도 올라감 데이터 ..

AI/빅데이터 2021. 5. 19. 18:22

연관규칙학습 예) 우유 구매자는 기저귀를 더 많이 구매하는가? 유형분석 예) 이사용자는 어떤 특성을 갖는가? 유전알고리즘 예) 최대의 시청률을 얻으려면 어떤프로그램을 어떤 시간대에 방송해야하는가? 감정분석 예) 새로운 환불 정책에 대한 고객이 평가는 어떤가? 회귀분석 예) 구매자의 나이가 구매 차량의 타입에 어떤영향을 미치는가? 기계학습 예) 기존의 시청 기록을 바탕으로 시청자가 현재 보유한 영화 중에서 소셜 네트워크 분석 예) 특정인과 다른 사람이 몇 촌 정도의 관계인가? 데이터베이스 설계 절차 요구사항 분석으로 적절한 것은? 오류가 발생하면 이전 단계로 되돌아가 설계 내용을 변경 가능함 요구사항분석 -> 개념적 설계 -> 논리적 설계 -> 물리적 설계 -> 구현 OLTP : 온라인 거래 처리 OLAP..

AI/빅데이터 2021. 5. 19. 18:06

TensorFlow lite 텐서플로우 라이트는 텐서플로우의 경량화 버전이다. 서버나 PC 같은 고성능 장치에서만 텐서플로우 모델을 동작을 하는 게 아니라 텐서플로우 라이트 포맷 형태로 변환을 거치면, 모바일과 같은 임베디드 시스템에서도 추론(Inference)할 수 있다. 이는 온-디바이스(On-Device), 즉 서버에서 추론한 결과를 뿌려주는 것이 아닌, 장치 내부에서 추론이 직접 가능하도록 하다는 의미이다. TensorFlow Lite Architecture TensorFlow Lite 변환기는 TensorFlow 모델을 사용하고 TensorFlow Lite 모델(. tflite 파일 확장자로 식별되는 최적화된 FlatBuffer 형식)을 생성한다. TensorFlow 를 만든 모델을 Tensor..

AI 2021. 5. 7. 10:23

Data Augmentation 등장의 이유? 전통적 특징점(Keypoint/Feature) 기반의 접근과 함께 머신 러닝, 딥 러닝 방법의 방법론이 늘어 갔다. 하지만 데이터 부족의 문제는 야기되고 있으며 계속해서 함께 따라다니고 있다. 이를 보완하는 측면에서 소량의 데이터를 가지고 인위적으로 학습 데이터를 재 생성하여 확장하는 방법이 사용되고 있다. 여기서 중요한 점은 Data의 의미이다. 빅 데이터의 4V 설명 가치(Value) 구슬의 서 말이라도 꿰어야 보배라는 속담이 있듯이 빅 데이터의 가치라는 속성을 잘 설명해준다. 데이터 자체가 중요한 것이 아니라 의사결정에 유용한 '정보(Information)' '지식(Knowledge)'으로 축적 되어야 한다. 다양성(Variety) 데이터베이스에 차곡차..

AI 2021. 5. 7. 10:08

Google COLAB 을 사용하여서 실습을 합니다. 먼저 아래 URL 에 접속을 합니다. colab.research.google.com/github/tensorflow/tensorflow/blob/master/tensorflow/lite/g3doc/tutorials/model_maker_image_classification.ipynb?hl=ko#scrollTo=Gx1HGRoFQ54j model_maker_image_classification.ipynb Run, share, and edit Python notebooks colab.research.google.com 첫 번째 라인에서 tflite 용 모델 패키지를 설치합니다. 필요한 라이브러리를 임포트 합니다. Simeple End-to-End Examp..

AI 2021. 5. 4. 11:17