제노 엔진

공식 홈페이지에서 다운로드하길 희망하는 cmake 다운로드 후 압축 풀기 https://cmake.org/download/ // 기존 cmake 삭제 sudo apt remove --purge --auto-remove cmake // 압축 해제한 디렉토리에서 bootstrap cd bootstrap make sudo make install cmake --version

도커 허브 퀵스타트 1. https://hub.docker.com/ 로그인 2. 레포지토리 생성 3. 적당한 곳에 폴더 만들고 Dockerfile 생성 cat > Dockerfile

GDC 2019 Intel에서 발표한 ISPC 세션을 재미있게 보았는데요. 특히, ISPC의 장점 중 ISA 셋이 바뀌어도 쉽게 버전업을 할 수 있다는 점이 마음을 울렸습니다.(...?) 좋은 프로젝트 인 것 같아 차근차근 정리하며 알아가려합니다! 모던 하드웨어의 고성능을 위한 병렬화의 종류 최신 하드웨어에서 고성능을 위한 병렬화의 종류에는 두가지가 있습니다. Multi Threading, Multi-Core Programming등 Task Single Instruction Multi Data (SIMD) 이중 두번째 SIMD와 관련된 기술인 ISPC를 소개하려합니다. ISPC ISPC는 Intel SPMD Program Compiler의 줄임말입니다. 이 컴파일러를 사용하면 닌자프로그래머 없이 컴퓨터의..

Bias and Vairance 고양이와 개사진을 보여주면서 분류하는 문제라면, 사람이 풀경우 거의 틀리지 않을것입니다. 이런 문제를 AI가 풀었다고 가정할 때, 각 케이스별로, 현재 AI가 갖고있는 편향과 편차에 대한 문제를 진단할 수 있습니다. - 훈련용 데이터 오차율 개발용 데이터 오차율 결과 Case 1(Error Percentage) 1% 11% High Variance Case 2(Error Percentage) 15% 16% High Bias Case 3(Error Percentage) 15% 30% High Bias & High Variance Case 4(Error Percentage) 0.5% 1% Low Bias & Low Variance 만약, 문제가 복잡해지고, 맞추기 어려워 질 ..

Double-Dueling-dqn 분석 핵심 3가지 Conv Network 사람이 화면을 보고 플레이 하는것처럼, 합성곱 신경망을 통해 학습 Experience Replay 과거 경험했던 히스토리를 기반으로, 일정 주기마다 학습한다. Correlation 현상 완화 Sperate network Q Target을 따로 두어, 일정 주기마다 Main-Q Network를 업데이트한다. Atari이후 DQN 을 개선하기 위한여러가지 방법들이 나왔으며, 그중 하나는 Dueling이다. Dueling Q-Table의 Q(가치)값을 아래처럼 2개로 나눌 수 있다. 어떤 행동을 하지 않아도, 그 상태에 자체의 가치 해당 State에서 행동을 함으로 서 얻는 가치 self.streamAC,self.streamVC = t..

Tensorflow-gpu 설치 NVIDIA Cuda, Tensorflow의 버전에 따라 호환 이슈가 생길 수 있습니다. 그러므로, tensorflow-gpu 설치 가이드에 명시한 버전들로 Cuda를 설치하는것을 권장합니다. 세팅한 장비는 XPS 랩탑에서 설치했으며 OS, GPU는 다음과 같습니다. OS : ubnutu 18.04 GPU : NVIDIA 960M Install CUDA with apt Ubuntu를 사용하시는 분들이라면, tensorflow gpu install guide에서 "Install CUDA with apt" 섹션을 참고해서 설치하시는게 가장 빠릅니다. 가이드를 따라가면서, 문제가 생기는 부분들은 구글링을 통해서 고치실수 있을겁니다. 트러블 슈팅 링크 아래 링크는 설치하면서 li..

Vanilla-Policy-Cart-Pole 플레이한 history 리스트를 가지고 역순으로 순회하면서 discount factor를 적용하는 부분이 재미있었습니다. def discount_rewards(r): """ take 1D float array of rewards and compute discounted reward """ discounted_r = np.zeros_like(r) running_add = 0 for t in reversed(xrange(0, r.size)): running_add = running_add * gamma + r[t] discounted_r[t] = running_add return discounted_r python에 익숙하지 않아, 이 부분도 갸우뚱 했는데요. s..

Q-Network 분석 Loss를 targetQ와 PredictQ의 차이값으로 설정하여 Weight 값들이 TargetQ에 형태로 접근하는 것이 인상적이었습니다. # loss = (targetQ - PredictQ)^2 loss = tf.reduce_sum(tf.square(nextQ - Qout)) np.identity(16)[s:s+1] 아래 코드에서 feed_dict에 input state를 넣어주는 코드가 어떤 의미인지, 왜 이렇게 작성했는지 이해하지 못했었습니다. # Feed Forward inputs1 = tf.placeholder(shape=[1, 16], dtype=tf.float32) W = tf.Variable(tf.random_uniform([16,4], 0, 0.01)) Qout =..

Open AI Gym 시작하기 Gym은 강화학습 알고리즘을 개발, 비교하기 위한 개발 도구이며, Tensorflow나 Theano 같은 수치 계산 라이브러리와도 호환됩니다. 설치 pip 명령어를 통해 gym을 설치합니다.(python 3.5+) pip install gym 환경들 아래는 최소 예제 코드입니다. 이 코드는 CarPole-v0 환경을 1000번의 스텝을 반복하며 렌더링합니다. 아래 코드를 실행하게 되면 고전적인 cart-pole problem 윈도우 창을 볼 수 있습니다. import gym env = gym.make('CartPole-v0') env.reset() for _ in range(1000): env.render() env.step(env.action_space.sample()) ..

https://towardsdatascience.com/welcome-to-deep-reinforcement-learning-part-1-dqn-c3cab4d41b6b Welcome to Deep Reinforcement Learning Part 1 : DQN Recent years, many AI laboratories are working on studying deep reinforcement learning (DRL) which is expected to be a core technology in… towardsdatascience.com https://medium.freecodecamp.org/an-introduction-to-deep-q-learning-lets-play-doom-54d02d80..