Review on paper : Generating videos with scene dynamics

GAN과 3d convolution에 대한 간단한 recap과 함께 준비했던 발표.   Review on paper : Generating videos with scene dynamics http://web.mit.edu/vondrick/tinyvideo/paper.pdf    

Advertisements

Review on paper: Vggnet

그동안 네트워크를 디자인할 때 다양한 size의 filter를 적용하기는 했지만 Vggnet에서는 이것을 3x3 filter를 쌓는 방식의 hierarchy로 구축했다는 것이 핵심. 이전 레이어에서 좁게 본 결과를 조금씩 넓게 보는 식으로 구조를 잡았다는 게 중요 포인트 정도 같다. (참고로 ResNet은 아예 레이어를 100개 이상 쌓아버리는데 그것이 가능하도록 네트워크에 identity mapping을 한 것이 핵심이라고 할 수 있다. (original 이미지를… Continue reading Review on paper: Vggnet

DeepHear정리2/2

Harmonizing melodies with constrained prior sampling 원문 : http://126kr.com/article/8eonheg4pqd   우리는 이 neural net이 실제로 어떤 음악적 구조를 배웠다는 것을 보여주고 싶다. (화성, 리듬, 코드 진행) 이를 위한 한가지 방법은 뉴럴넷으로 하여금 학습되지 않은 새로운 문제를 풀도록 하는 것이다. : 멜로디가 주어졌을 때 harmonize하는 것. 이것이 가능하다면 우리 뉴럴넷이 음악의 실제 패턴을 encode한다는 것을 의미하며, 다른 음악적… Continue reading DeepHear정리2/2

DeepHear정리1/2

  원문 : Scott Joplin's music into deep neural network (Deep Belief Network) http://126kr.com/article/8eonheg4pqd     DBN : Deep belief network (RBM 같은 energy-based deep network)         Initial value for W and B is very important.   Flipping a DBN - Autoencoders 저렇게 디자인한 DBN의 경우, 많은 양의 인풋 데이터를 넣으면 조금의… Continue reading DeepHear정리1/2

Asking RNN + LSTM : What would Mozart write?(번역)

Asking RNN + LSTM : What would Mozart write? http://www.wise.io/tech/asking-rnn-and-ltsm-what-would-mozart-write     AI를 넘어서는 진보는 Aritificial Creativity가 될 것이다. 나는 AC에 한동안 관심이 있었고 AC를 미술, 음악, 글쓰기 등에서 테스트하는 방법을 연구하는 학회에서 여러가지 주제들을 학습했다. 음악에서는, 흥미롭고, 도전할만 하고, 유니크한(기존의 작곡가들과 차별화 될 만한) 곡을 기계가 작곡한다면 매우 큰 성과가 될 것이다. 기계 작곡은… Continue reading Asking RNN + LSTM : What would Mozart write?(번역)

DL 작곡 관련 research

Deep Jazz - Jazz generated with deep learning http://www.creativeai.net/posts/yXFegaBH6LT83jn2m/deepjazz-jazz-generated-with-deep-learning https://github.com/jisungk/deepjazz 미디 파일을 clean up 한 후에 learning 시킴   JazzML : Computational Jazz Improvisation https://github.com/evancchow/jazzml 위 Deep Jazz 연구의 기반이 되는 연구   ABC version of the Nottingham music database http://abc.sourceforge.net/NMD/ 노래의 코드 정보만을 간추려서 DB화한 데이터 learning data로 활용   MNIST database http://yann.lecun.com/exdb/mnist/ 손글씨에… Continue reading DL 작곡 관련 research