데이터과학을 위한 저작도구

강서양천일보('15.08월)

데이터과학자를 위한 저작 툴체인

R Presentation

세가지 다른 언어 패러다임

세가지

현재 상황 요약

아래한글, 리브레오피스, 마이크로소프트 워드 같은 데스크톱 위지윅 도구 :지금까지 편지같은 단순한 저작물을 생성하는 가장 쉬운 방식이지만, 융통성이 없고, 불명확하고 수식을 배치하는 기능이 상대적으로 미약하고, 버젼제어 시스템과 궁합이 맞지 않는다.
구글 독스 같은 웹기반 위지윅 도구: 워드나 한글, 리브레오피스의 신속성을 갖추고, 더불어 협업을 수월(왜냐하면 모든이가 문서 사본 하나만 공유하기 때문)하게 한다. 하지만, 웹기반 위지윅 도구는 여전히 융통성이 없고 불명확하며, 책임을 질 수 없는 개인회사 바구니에 모든 달걀을 놓는 것에 많은 사람들이 불편해하고 있다.
데스크톱 LaTeX: 강력한 조판언어로 수식과 참고문헌관리에 정말 훌륭한 기능을 제공한다. 버젼제어 시스템과 조화가 잘 되는데, 일반 텍스트로 문서를 저작하기 때문이다. 하지만, 지금까지 학습하기 가장 복잡하고, 텍스트와 그림을 원하는 곳에 배치시키는 작업이 고생스럽게도 수시간 소요될 수 있다.
Authorea, Overleaf 같은 웹기반 도구 : 위지윅 편집 인터페이스를 저자에게 제공하지만 문서는 LaTeX으로 저장되고, 변경사항을 타이핑해서 넣을 때마다 실시간으로 화면에 다시 출력해서 보여준다.
HTML : 웹의 네이티브 언어로 LaTeX 보다 훨씬 (훨씬) 더 단순하지만, 훨씬 더 적은 기능을 제공한다: 주석, 참고문헌관리, 절마다 번호매기기 같은 단순한 기능도 직접적으로 지원되지 않는다. 상당히 버보스하게 상세할 수도 있고, CSS2는 변덕스러운 것으로도 유명하다.
마크다운 : HTML에 대한 단순화 대안으로 개발되었다. 마크다운은 일반-텍스트 전자우편 관례를 사용한다: 빈줄은 문단을 구분하고, 이탤릭체로 만드는데 *별표*로 감싸는 등등. HTML보다 더 적은 작업을 수행하지만, 타이핑 양은 훨씬 더 적다. 하지만, 불행하게도 거의 모든 마크다운 구현결과물이 자체적인 기능이 추가되어서 “마크다운 표준”은 모순어법에 해당된다.

데이터 과학을 위한 마크다운과 LaTeX

GUI 저작 시스템

데스크톱 위지윅 저작시스템: 아래한글, MS 워드
클라우드 위지윅 저작시스템: 구글독스

마크다운 : 웹사이트와 블로그

장점: 대부분 사람이 HTML로 원하는 모든 것을 그다지 많이 타이핑하지 않고도 수행
단점:
- 저널 대부분이 제출형식으로 받아주지 않기 때문이다.
- 고위 연구협력자가 이를 받아줄 가능성은 없다. (물론, 고위 연구협력자가 LaTeX을 사용하지 않았다면, LaTeX으로 전환하지도 않을 것이다…).
- 과학연구원이 원하는 기능 상당수를 마크다운이 지원하는 않는다. (예를 들어, 참고문헌 서지관리)

LaTeX : 원고저작 및 출판

장점
- PDF와 다른 표준형식으로 컴파일 작업을 수행한다.
- 그림과 표를 배치하는데 탁월한 성능을 보여준다.
- 버젼제어와 잘 묶어 작업할 수 있다.
- 서지관리 소프트웨어 상당수와 호환된다.
- 많은 저널에서 받아주는 형식이다. (하지만, 학문 분야마다 상당한 다양성이 존재한다.)
단점

한국인이기 때문에 알아야 되는 것

사람과 기호 그리고 컴퓨터

참고자료: R 유니코드, 인코딩

텍스트 데이터 처리 시작 : 인코딩

`readr` 인고팅 확인

전통적 작업 흐름

저작물을 생산, 유통, 고객 소비까지 이르는 공급망

저작자와 독자 사이에 다수 중간단계 존재
- 편집 및 디자인
- 출판
- 배송
- 서점 : 전통 책방, 온라인 서점, 전자책 등
각 단계별 인력, 소프트웨어, 기계장비 등 필요

데이터 과학 저작 작업흐름

저작자와 고객을 중간과정 자동화를 통한 저작물 직접 유통

저작 흐름 비교

저작자와 고객을 중간과정 자동화를 통한 저작물 직접 유통

저작물을 생산, 유통, 고객 소비까지 이르는 공급망

도구가 자동화하는 저작 업무

파이썬 스핑크스(Python Sphinx)

파이썬 스핑크스 저작 흐름

북다운(Bookdown)

설치방법

https://github.com/rstudio/bookdown-demo GitHub에서 포크를 뜨고, git clone 하여 로컬 컴퓨터에 저장한다.
RStudio 사전출시 버젼을 다운로드 해서 설치한다.
클론한 bookdown-demo 저장소에서 bookdown-demo.Rproj 파일을 클릭해서 연다.
bookdown 팩키지를 설치한다. devtools::install_github("rstudio/bookdown")
index.Rmd R 마크다운 파일을 열고, RStudio build 탭에 Build Book을 클릭한다.