RPA (Robotic Process Automation)

1. 명령라인(Commandline) 데이터 분석
   • 명령라인(Commandline) 인터페이스 - 데이터 과학
   • 대용량 데이터 표본추출
   • CLI: 데이터 가져오기
   • CLI: csvkit 데이터 분석
   • CLI: 예측모형 자동배포 - iris
   • R에서 쉘 System 호출(Invoke)
2. 자동화(Automation)
   • R코드 자동화
     • 유닉스 철학과 파이프라인
     • .R 스크립트 실행
     • .R 스크립트를 인자와 함께 실행
     • optparse 파이썬 스타일
     • 분석결과 내보내기
   • R 자동화(Make) - drake
     • 소프트웨어 카펜트리 자동화 Make(소프트웨어)
     • R과 Make(소프트웨어+R) - TV 토론 효과
     • STAT545 자동화 - Make
3. 쉘 프로그래밍 (Shell Programming)
   • 쉘 프로그래밍: 반복, 조건문, 함수

• 특수주제
  • CLI 환경설정: 도커 - Data Science at the Command Line
  • 데이터 가져오기(ingest)
  • 함수: 쉘 스크립트(.sh) vs 스크립트(.R, .py)
  • 대용량 텍스트 데이터 깔끔하게 다루기
• 데이터 과학 자동화 (autoX)
  • autoX 헬로월드
    • autoX 헬로월드: 데이터 품질
    • autoX 헬로월드: 데이터 변환
    • autoX 헬로월드: EDA
      
    • autoX 헬로월드: 모형
      

1. GitHub Action 살펴보기 - 헬로월드
   • 펭귄 성별 예측 CI/CD
   • GitHub Action: Rmd 파일 컴파일 - render
     • GitHub Action: Rmd 프로그램 작성
   • GitHub Action: Rmd 파일 컴파일 - CI
   • GitHub Action: Rmd 파일 컴파일 - CI + Cron

참고문헌

• Jeroen Janssens (June 10, 2019), “Data Science at the Command Line”
• Moshe Zadka (2019년 6월 4일), “DevOps in Python: Infrastructure as Python”
• Noah Gift (2019), “Command Line Automation in Python”, Data Camp
• Software Carpentry (2018), “Intermediate Shell”
• Chris Brown, Murray Cadzow, Paula A Martinez, Rhydwyn McGuire, David Neuzerling, David Wilkinson, Saras Windecker (2020-09-10), “Github actions with R”
• Jenny Bryan, the STAT 545 TAs, Jim Hester, “Happy Git and GitHub for the useR”
• Will Landau, “The targets R Package User Manual”