어떤 진술이 과학적인가를 논하는 것보다는 많은 경우에 그렇듯 과학적이지 않은 진술의 조건을 찾는 것이 더 수월할 것이다. 즉 충분조건을 찾기보단 필요조건을 찾는 쪽이 …

모형의 파라미터는 모형의 학습 과정에서 결정된다. 그렇다면 파라미터에 영향을 미치는 하이퍼파라미터는? 그건 사람이 결정해야 할 문제다. 이걸 잘 정하는 것, 혹은 …

해석하기 어려운 블랙박스 모형이라고 하면 대충 어떤 것이 있을까? 아마 대표적인 것이 트리 앙상블일 것이다. 그런데 트리 앙상블이 왜 해석하기 어려운가? 반대로 해석 …

https://twitter.com/ylecun/status/764033716276428800 인상적인 성능을 내는 뉴럴넷 모형을 학습하려면 (연산능력의 증가와는 별개로) 늘 2-3주는 필요하다는 이야기가 있다. 수백 개의 GPU를 쓰면 모형도 그만큼 복 …

인과 그래프 모형 같은 경우는 전형적인 데이터의 생성 과정을 기술하는 모형이지만 동시에 알고리즘적 모형에서 흔히 발견할 수 있는 비모수적 함수 추정이 결합되어 있다. …

https://deepmind.com/blog/understanding-agent-cooperation/ 최근에 인공지능에 승부욕이 있다느니 혹은 공격성을 보였다느니 하는 식으로 소개된 딥마인드의 연구다. 사실 연구의 핵심은 두 행위자들을 강화학습으로 훈련시켜서 …