클라이언트/ 서버/ 엔지니어 "게임 개발자"를 향한 매일의 공부일지

이번에는 비디오 특수 효과에 대해서 공부해보겠다.   비디오 특수 효과프로그램 6-6을 조금 수정하면 비디오 버전으로 만들 수 있다. 비디오 버전에서 신경 쓸 점은 웹 캠을 통해 들어오는 초당 30프레임의 영상을 실시간으로 처리하는 일이다. 한 장을 특수 효과 처리하는 시간이 1/30초 이내라면 지연 없이 비디오를 디스플레이할 수 있다. 그렇지 않다면 지연이 발생한다.프로그램 6-7의 실행 결과를 보고 사용자 인터페이스를 확인해보자. 버튼은 웹 캠과 연결하여 윈도우에 비디오 영상을 디스플레이한다. 두 번째 메뉴는 콤보박스로 여러 특수 효과 중에서 하나를 선태할 수 있다.  비디오 영상에 특수 효과 처리하기 이 코드는 PyQt5와 OpenCV를 사용하여 실시간 비디오에 여러 특수 효과를 적용하고 화면에 ..

3장에서 필터로 컨볼루션을 수행하면 엠보싱이라는 특수 효과를 거둘 수 있음을 프로그램 3-7에서 확인했다. 여기서는 엠보싱뿐 아니라 카툰, 연필 스케치, 유화라는 특수 효과로 확장하여 GUI를 붙인 비전 에이전트를 제작해 볼 것이다.   특수 효과의 원리OpenCV는 특수 효과를 휘한 흥미로운 함수를 여러 개 제공한다. stylization은 카툰 효과, pencilSketch는 연필로 스케치한 효과, oilPainting은 유화 효과를 제공한다. sylization과 pencilSketch는 기본값이 설정되어 있어 생략해도 되지만 oilPainting은 기본값이 없으니 꼭 지정해야 한다. 특수 효과에 대한 설명은 다음 링크를 참고하면 된다.  특수 효과를 위한 함수 참고 자료stylization, pe..

이번에는 파노라마 영상을 제작하는 실습을 진행해보겠다. 사진 한 장에 다 담을 수 없는 멋진 장관을 만났을 때 카메라 시점을 조금씩 돌려 여러 장을 찍은 다음 봉합하여 파노라마 영상으로 제작하곤 한다. 파노라마 기능은 디지털 카메라에 내장되어 있고 스마트폰 앱으로도 제공된다. 여기서는 OpenCV를 이용하여 파노라마 영상을 제작하는 비전 에이전트를 만들어본다. 파노라마 제작은 이전 단원에서 소개한 SIFT 특징을 이용하여 구현할 수 있다. OpenCV는 여러 장의 영상을 주면 자동으로 파노라마를 제작하는 sitch라는 아주 편리한 함수를 제공한다.    SIFT를 이용한 영상 봉합먼저 프로그램 6-5의 실행 경과를 보고 사용자 인터베이스를 확인해보자. 버튼은 웹 캠으로 영상을 수집할 때 사용한다. 버..

이번에는 교통약자 보호구역 알림에 대한 비전 에이전트 실습을 진행해 보겠다. 어린이, 노인, 장애인과 같은 교통약자에 대한 보호 정책이 강화되고 있다. 이들 보호구역에 설치된 교통 표지판을 컴퓨터 비전 기술로 인식하여 운전자에게 알리면 사고를 줄이는데 크게 도움이 될 것이다. 이전 장에서 다룬 SIFT 특징과 SIFT를 사용한 프로그램 5-4를 잘 활용하면 교통 표지판을 인식할 수 있다.블랙박스 또는 스마트폰을 통해 들어오는 동영상을 처리하면 좋겠지만 여기서는 사용자가 선택한 도로 영상에서 표지판을 찾는 일로 한정한다.   도로 영상에서 표지판 식별다음 프로그램에서 실행 결과에 있는 GUI 윈도우를 먼저 살펴보자. 버튼은 세 종류의 표지판 모델 영상을 읽어 등록하고, 버튼은 사용자가 도로 영상을 선택..

대화식으로 물체를 분할하는 기법인 GrabCut은 지난 단원에서 다루었다. 이 함수를 이용하여 물체를 오려냈었다. 사용자가 마우스 왼쪽 버튼으로 물체의 일부를 파란색으로 칠하고 오른쪽 버튼으로 배경 일부를 빨간색으로 칠하면 grabCut 함수가 물체 영역을 오린다. 관심 물체 분할이 프로그램은 사용자와 상호작용하면서 GrabCut을 반복 적용하여 사용자가 만족할 때까지 물체 영역을 오려내는 일을 지원하는 비전 에이전트다.먼저 프로그램 실행 결과를 살펴보자. GUI 윈도우에 버튼이 7개 있는데, 왼쪽부터 영상 읽기, 페인팅 시작하기, 오리기, 붓 크기 조정하기, 저장하기, 나가기를 담당한다. 버튼을 이용해 원하는 영상을 선택한다. 버튼을 클릭하면 붓칠이 가능한 상태가 된다.  실행 결과에서 사용자가 물..

저녁식사 후 6단원 학습을 시작해보려고 한다. 많이 하면 2시간 정도 할 수 있을 것 같다. 할 수 있는 데까지 해보자. 시작하기 전에컴퓨터 비전이 쓸모 있으려면 환경과 상호작용을 해야 한다. 아래 그림에 있는 배달 드론, 공장 조립 라인에서 불량품을 거르는 검사 시스템, 상차림을 인식하여 다이어트 조언을 하는 스마트폰 앱은 환경과 활발히 상호작용한다.  컴퓨터 비전이 환경과 상호작용하게 하려면 환경에서 영상을 획득하는 기능과 처리한 결과에 따라 환경에 영향을 미치는 기능을 적절하게 추가해야 한다. 이번 장에서는 사용자 인터베이스를 붙여 환경과 상호작용할 수 있도록 확장한다.   지능 에이전트로서 비전 에이전트경제학은 사람을 합리적 에이전트로 바라본다. 이 관점은 사람을 항상 최적의 의사결정을 하려 노력..

남은 두 문제도 마저 풀어보려고 한다. 8번 문제는 조금 어려워보이지만 한번 도전해볼 것이다.    연습문제 풀기 네번째 문제 7번알고리즘 5-2에서는 임계값에 따라 FP를 줄이려면 임계값 t, d, e, 각각을 늘려야 하는지 줄여야 하는지 쓰고 그 이유를 설명하시오.  알고리즘 5-2  알고리즘 5-2는 매칭된 점 쌍의 집합을 입력으로 받아 최적의 호모그래피 행렬을 추정하기 위해 RANSAC(Random Sample Consensus) 알고리즘을 적용하는 과정이다. 호모그래피 행렬은 두 이미지 간의 대응점 쌍을 통해 변환 관계를 나타내며, 이 알고리즘을 사용하면 외란점(outlier)을 걸러내어 최적의 변환 행렬을 구할 수 있다. 알고리즘 설명변수 초기화 (h=[]):최적의 호모그래피 행렬을 저장할 리..

나머지 문제도 이어서 풀어보겠다.   연습문제 풀기 세 번째 문제 6번그림 5-9의 옥타브 영상을 마드는 프로그램을 작성하시오. 예시 영상은 스스로 고르시오.(1) 그림처럼 6개의 가우시안 영상과 5개의 DOG를 만들어 서로 다른 윈도우에 디스플레이하는 프로그램을 작성하시오.(2) 옥타브를 구성하는 가우시안 영상의 개수를 지정할 수 있도록 프로그램을 확장하시오.  그림 5-9  이 그림은 SIFT(Scale-Invariant Feature Transform) 알고리즘에서 사용하는 다중 스케일 공간의 개념을 보여준다. 여기서 옥타브(Octave)와 DOG(Difference of Gaussian)에 대해 설명하겠다.옥타브(Octave)옥타브란 SIFT에서 이미지 피라미드의 한 층을 의미한다. 옥타브는 여러..

이어서 3번 문제부터 풀어보겠다. 조금 전에 푼 문제가 너무 어려워서 해결하지 못하는 문제를 가지고 1시간 반이나 붙잡고 있었다. 결국 풀지 못했지만 답을 구하는 것만이 능사는 아니라는 것을 느끼는 시간이었다. 문제와 씨름하는 그 시간이 정말 소중한 시간이었다.도무지 풀 수 없는 문제 앞에서 좌절하지 않고 용기를 내며 나아가는 나의 모습이 무척 뿌듯하고 자랑스러웠다. 요즘은 개발 공부하는 속도가 너무 느리라는 생각이 들 때도 있다. 특히 컴퓨터 비전은 진도가 잘 안 나간다. 그래도 난 많이 배우고 있고 성장하고 있다고 믿기로 했다.   연습문제 풀기 두 번째 문제 3번프로그램 5-2의 10, 14행은 가능한 모든 키를 생성하고, 18행은 키포인트를 그린다.(1) 키포인트를 2개만 생성하도록 프로그램 5-..

아침에 수학 공부를 하다가 무척 화가 나는 일이 있었지만 마음을 가라앉히고 오늘 해야 할 공부를 어느 정도 진행해보았다. 살다보면 정말 가식적이고 언행이 불일치되는 사람을 만날 때가 있다. 난 그런 사람과는 정말 상종도 하기 싫지만 이제 2주만 있으면 더 볼일도 없을 것 같다. 어디서 마주치더라도 인사도 안할 생각이다. 아무튼 오늘 푼 수학 문제는 많이 어려워서 하루에 다 풀지 못할 것 같아 내일 이어서 풀어보기로 했다. 그리고 오늘 갑자기 무슨 시험을 본다고 해서 공부도 하나도 안 했는데 설치하고 기출문제 한번 읽어보느라 시간이 좀 걸렸다. 오늘도 영어 공부는 못할 것 같다. 오후 4시에 시험이라고 하니 3시간 정도 시간이 있으니 그때까지 연습문제를 풀어보려고 한다. 오늘 6장을 다 못 끝낼 수도 있겠..