TIL_220623_딥러닝

유화제작 프로젝트

Style transfer = 업로드한 사진을 유화처럼 변환해준다.

 

012

사용 방법

git 참고 : https://github.com/crowsonkb/style-transfer-pytorch

GitHub - crowsonkb/style-transfer-pytorch: Neural style transfer in PyTorch.

1. 가상환경 설정 후 [ pip install -e . ] 설치
2. style_transfer_pytorch.egg-info 경로 설정
   • $ cd ~/code/deep_learning/style_transfer_pytorch.egg-info
3. style_transfer main.jpg backgraound.jpg
   • style_transfer CONTENT_IMAGE STYLE_IMAGE [STYLE_IMAGE ...] [-o OUTPUT_IMAGE]
4. iterations: int = 500, 500번 돌아서 아웃풋 출력(조정에 따라 퀄리티 조정 퀄리티와 시간 비례)
   • 조건이 필요할 듯 하다.
     • 사진 용량에 대한 제한
     • 확장자 지정 안내

 

Q. 서비스 하려면 어느정도 시간에 결과물을 보여줘야 하나요?

- 로딩이 되는 시간 동안 다른 영상을 틀어주는 등의 서비스 제공하는게 좋을 듯

 

HOW? 어떻게 압축이 되는가?

1. 복원 과정은 여러번의 쪼개는 과정을 통해 유사한 레이아웃을 구분한다.
2. 복원 과정에서 스타일을 입힌다고 보면 된다

 

---

 

딥러닝 다른 종류

딥페이크

git : https://github.com/AliaksandrSiarohin/first-order-model

GitHub - AliaksandrSiarohin/first-order-model: This repository contains the source code for the paper First Order Motion Model f

 

SEFA

git : https://github.com/genforce/sefa

GitHub - genforce/sefa: [CVPR 2021] Closed-Form Factorization of Latent Semantics in GANs

sefa-gan 사용방법

1. checkpoints 폴더 안에 모델 저장

[모델 다운로드 페이지]
https://github.com/genforce/genforce/blob/master/MODEL_ZOO.md

 

[키워드]

car512, anime

 

[다운로드한 파일]

stylegan_animeface512.pth

 

2.모델 세팅

MODEL_NAME=stylegan_animeface512
LAYER_IDX=0-1
NUM_SAMPLES=5
NUM_SEMANTICS=5
python sefa.py ${MODEL_NAME} \
    -L ${LAYER_IDX} \
    -N ${NUM_SAMPLES} \
    -K ${NUM_SEMANTICS}

3. pip install

[streamlit 버전 충돌시]
pip uninstall streamlit

[정상버전]
1. pip install streamlit==1.3.1
2. pip install opencv-python
3. pip install torch==1.9.0+cu111 (버전오류) torchvision==0.10.0+cu111 torchaudio==0.9.0 -f https://download.pytorch.org/whl/torch_stable.html

[이걸로 진행]
pip install torch==1.9.0+cu111 torchvision==0.10.0+cu111 torchaudio==0.9.0 -f https://download.pytorch.org/whl/torch_stable.html

pip install torch==1.11.0+cu115 -f https://download.pytorch.org/whl/torch_stable.html
pip install torchvision==0.10.0+cu111 -f https://download.pytorch.org/whl/torch_stable.html
pip install torchaudio==0.9.0 -f https://download.pytorch.org/whl/torch_stable.html

4. 실행
CUDA_VISIBLE_DEVICES=0 streamlit run interface.py

 

Simple StyleGan2 for Pytorch

git : https://github.com/lucidrains/stylegan2-pytorch

GitHub - lucidrains/stylegan2-pytorch: Simplest working implementation of Stylegan2, state of the art generative adversarial net

 

pix2pix

git : https://github.com/phillipi/pix2pix

GitHub - phillipi/pix2pix: Image-to-image translation with conditional adversarial nets