임이지의 블로그

서평 구글 엔지니어는 이렇게 일한다.라는 책을 읽고 가장 좋다고 느낀 것을 정리해보았다. 첫 번째, (겸손, 존중, 신뢰) 이 단어였다. 개발자 문화중 코드 리뷰에 대해서 지적이 아니라 겸손, 존중, 신뢰 3가지를 기반으로 문화를 만들었다는 것에 매우 부러웠다. 두 번째, 지속 가능성. 소프트웨어를 개발할 때 목표, 설계 등 여러 가지 요소들이 있는데 가장 중요한 것이 지속 가능성이라고 생각한다. 당연한 말이지만 버그를 수정하며 사용자가 편한 기능을 만드는 것도 중요하지만 그 외적으로 버전 관리, 빌드 시스템 등 개발자들도 편하게 일할 수 있는 개발환경 요소도 중요하다. 개발자가 쉽게 다가갈 수 있어야 소프트웨어의 기대 수명과 지속 가능성이 연장된다고 생각된다. 세 번째, 포스트 모템 문화. 가장 좋다고..

Developer/IT 도서 2022. 6. 9. 17:47

서평 이 책은 머신러닝 알고리즘에 대해서는 깊은 설명은 없으나 간략한 특징과 실제 머신러닝 프로젝트를 수행하기 위해 필요한 필요한 지식에 대해서 소개한다. 프로젝트를 시작할 때 여러 필요 요소가 있는데 필자가 생각할 때는 해결하려는 비즈니스 모델의 도메인 지식이 중요하다고 생각했지만 책에서는 아래 4가지가 가장 중요한 요소라고 한다. 제품에 관한 도메인 지식을 가진사람 통계나 머신러닝을 잘 아는 사람 데이터 분석 인프라를 만드는 엔지니어링 역량을 가진 사람 실패 리스크를 책임지는 책임자 머신러닝 프로젝트는 모델 관련 지식, 코딩 스킬 차이 등 사람에게 의존하기 어려우며 일반적인 소프트웨어보다 인수인계가 어려우며 이러한 문제로 공통 실험 환경(개발환경)이 필요하다. 머신러닝 프레임워크로는 TensorFlo..

Developer/IT 도서 2022. 4. 26. 14:30

바쁜 일상 속에서 서로 다른 가치관이 공존하는 여러 사람들과 각자의 꿈을 향해서 우리는 매일 일어나고 노력과 도전을 통해서 하루하루 살아가고 있다. 아침에 일어나서 커피 한잔하며 유튜브를 보다가 어릴 때는 몰랐는데 지금은 이 말에 의미가 마음에 와 다은다. "포기하면 편해" ㅎㅎㅎ https://www.youtube.com/watch?v=57FhcTzIiuI

Developer/일상다반사 2022. 4. 24. 13:24

https://ap-northeast-2.console.aws.amazon.com/sagemaker/home?region=ap-northeast-2#/notebook-instances Amazon SageMaker에서 노트북을 사용하려면 먼저 노트북 인스턴스를 생성해야 합니다. SageMaker 콘솔 메뉴에서 [노트북 인스턴스]를 선택하고 화면에서 [노트북 인스턴스 생성] 버튼을 클릭합니다. 노트북 인스턴스에 원하는 이름을 붙이고 화면 하단의 [노트북 인스턴스 생성] 버튼을 클릭합니다. 노트북 인스턴스가 만들어질 때까지 시간이 걸립니다. 노트북 인스턴스 상태는 생성 버튼을 클릭한 직후에는 Pending 상태이고 인스턴스 생성이 완료되면 InService 상태가 됩니다. InService 상태가 되면 아래..

AWS/AWS 기반 AI 개발 2022. 4. 13. 16:09

https://ap-northeast-2.console.aws.amazon.com/sagemaker/home?region=ap-northeast-2#/landing SageMaker - 훈련 - 훈련 작업 훈련 작업 생성 클릭 IAM 역할에서 새 역할 생성을 선택 모든 S3 버킷을 선택합니다. 설정에 따라 특정 S3 버킷을 선택하여도 무방합니다. 훈련 작업 생성 화면을 열었지만, IAM Role 생성을 완료했기 때문에 이 화면을 닫아도 문제는 없습니다.

AWS/AWS 기반 AI 개발 2022. 4. 13. 15:58

개발환경이 변경 되었을때 일일히 패키지를 설치해야 하는데 이때 일일이 설치하지 않고 현재 사용하는 패키지만 기록해놓을 수 있도록 사용되는 명령어는 pip freeze 명령어 이다. pip freeze > requirements.txt 위의 명령어를 실제로 사용시 아래처럼 모든 패키지들이 포함 된다. 하지만 해당 명령어는 시스템 내의 모든 패키지를 requirements.txt 로 만들어 준다. 필자가 원하는 것은 해당 프로젝트에서 사용하는 패키지만 requirements.txt 로 만드는 것이 필요하였다. pipreqs 를 사용하면 해당 프로젝트에서만 사용하는 패키지만 requirement.txt 로 만들어 준다. 설치 #pipreqs 설치 pip install pipreqs 실행 pipreqs /hom..

AI/개발도구 2022. 4. 12. 16:57

STREAMLIT 을 이용하여 웹에 배포시에 위와 같은 오류가 발생 하였다. 해결 안 https://docs.streamlit.io/knowledge-base/dependencies/libgl 배포할 GIT Repo 에 packages.txt 파일을 추가하고 libgl1 를 추가 하면 해당 오류는 수정 된다.

AI/개발도구 2022. 4. 12. 16:46

서평 딥러닝 프레임워크는 TensorFlow, Caffe, Keras 등 여러 프레임워크가 있다. 이 책은 제목 그대로 파이토치를 사용하여 딥러닝을 개발할 수 있는 방법에 대해 소개한다. 필자는 주로 Colab 개발환경에서 TensorFlow를 사용하여 딥러닝 훈련을 하고 있다. TensorFlow 를 사용하다 보면 버전 별로 Deprecated 된 api 나 변경 사항 때문에 일부 소스가 동작하지 않는 경우가 있는데 파이토치는 이런 면에서는 관리가 잘되어 있어서 편리하다는 것을 느낄 수 있었다. 해당 책은 이미지 처리를 위한 CNN, 시계열 분석을 위한 LSTM, 단어 임베딩을 위한 CBOW, 강화학습 및 Gan 등 현재 많이 사용되는 모든 딥러닝 모델에 대해 정리되어 있어 딥러닝 베이스를 학습할 수 ..

Developer/IT 도서 2022. 4. 6. 21:14