2021 Efficient Deep Learning Efficient Deep Learning: A Survey on Making Deep Learning Models Smaller, Faster, and Better paper 모델 압축 몰아보기 위해 Google Researcher에서 나온 Efficie...

보통 제가 읽으려고 글을 쓰는데 혹시 부족한게 있다면 댓글이나 메일을 부탁드립니다. 개선하겠습니다. 오늘은 개인적인 일로 Tensorflow를 JAVA, C#에 포팅하기위해 모델을 저장하는 방법을 정리하려 합니다. 사실 사소한건데 맨날 안적어놓으면 또 찾느라 시간 낭비가 되네요 ㅠㅠ TensorFlow 2.0 version 부터는 설명이 잘 나...

Competitions에서 맨날 사용되는 LightGBM과 XGBoost 그에 대해서 알아보자 먼저 이 두가지 알고리즘은 Tree-based 알고리즘이라는 것을 알아두고 넘어가자 사실 우리는 가져다가 사용하기 때문에 개념보다는 파라미터가 뭐가 들어가고 뭐가 좋고 이런게 더 관심있을 것이다. 나는 Tabular 데이터를 다루는 능력은 미숙하지만 그...

조금씩이라도 자주 써야겠다. Pytorch Lighting 항상 이런게 있구나 써봐야지 하면서 이제 써보는 Pytorch Lighting.. 진작 써볼껄.. 너무 편한거 같은 생김새와 실제로 사용할 때 매력적인 snippet들! Github 사실 public github만 보아도 사용법을 바로 습득할 수 있다. 한번 보고 넘어갑시다 ^...

JAX Github : https://github.com/google/jax Docs : https://jax.readthedocs.io/en/latest/ 요즘 Deep Learning 오픈소스를 보면 JAX를 사용한 많은 프로젝트가 보인다. 실제 DeepMind도 자신들의 프로젝트의 대부분을 “JAX”와 결합을 시켰다고 하는데.. 왜...

Pytorch Multi GPU 요즘 단일 GPU로 학습시킬 수 있는 모델이 없을 정도로 모델 복잡도, 데이터 크기가 엄청나게 방대하다.. 그래서 대부분 Multi GPU를 사용하는데 어떻게 잘써야하는지는 알기 어렵다. 처음 Multi GPU를 사용하는 방법에 대해 설명해주는 좋은 자료는 많았지만 내가 쉽게 읽기 위해 여태 읽었던 글들을 바탕으로 ...

Process of Face Identification 기본적으로 얼굴을 인식하기 위한 과정은 Face Detection -> Face Feature Point Detection -> Face Alignment -> Face Crop -> Face Identification 으로 정리 될 수 있다. FaceNet을 알...

Serialization 데이터 구조를 바이트 스트림으로 인코딩하는 것 데이터 구조를 여러 환경에서 공유하기 위해서 형태를 변환하는 방법 네트워크 전송도 가능 데이터 구조 == (직렬화) ==> Byte == (역직렬화) ==> 데이터 구조 Protobuf ...

Detectron 페이스북에서 개발한 object detection, segmentation 프레임워크다. Pytorch로 구현된 Detectron 오픈소스가 2가지가 있다. Detectron Detectron 2 이 포스트에서는 구버전은 사용하지 않고 최신버전인 Detectron2를 사용한다. 지속적으로 업데이트 되고 공식 문서가 잘...

가끔 기억 안날때 보려고 한줄식으로 매우 간략하게 적었다. 자세한 내용을 알고 싶으시면 [Here] 이 곳 수업에서 알아보시는 것을 추천한다. 기하학적인 정의는 Here 유튜브에 알기 쉽게 나와 있었다. 벡터 vector = 크기 + 방향 순서가 정해져 있다. one-dimension lowercase 표현 : \(x = [1...