Skip to content

ShinyRyo/100knocks-preprocess

 
 

Repository files navigation

Name

データサイエンス100本ノック(構造化データ加工編)

Overview

  • データサイエンス100本ノック(構造化データ加工編)を実践するための演習問題とデータ、および環境構築のためのスクリプト一式
  • 演習問題はSQL、Python、Rで共通
  • 言語によっては向かない設問もあるが、「この言語のときはこう書けば実現できる」という技術習得を目指すことを優先
  • 個人情報のように見える項目は全てダミーデータを利用

Description

  • Dockerfile(Dockerfile.notebook, Dockerfile.postgres)
  • docker-compose.yml
  • スーパーの架空購買データと架空個人情報(csv)
  • データベースを初期設定するための各種スクリプト

Requirement

  • Docker(Windows 10 proffesional Edition, macOS)
  • Docker Toolbox(Windows 10 home edition)

Install

  • $ git clone [Repository URL] ※
  • $ cd 100knocks-preprocess
  • $ docker-compose up -d --build

※ OSユーザーのホームディレクトリ配下以外にダウンロードする場合、Dockerの共有設定が別途必要となります

※ Windowsでgitを利用する場合、デフォルト設定でのインストールを行うとスクリプトの改行コードを変えられてしまい、データベースを正しく構築できないことがあります

※ 改行を変えないよう設定するか、ZIPをダウンロードして利用してください

※ インストールの説明はdoc配下の説明資料も参照してください

Usage

Document

  • doc配下にデータサイエンス100本ノック(構造化データ加工編)の説明資料と設問PDF、設問HTMLを配置
  • work配下に設問notebookを配置
  • work/answer配下に解答例notebookを配置
  • work/data配下に使用したデータを配置

Author

The Data Scientist Society

About

データサイエンス100本ノック(構造化データ加工編)

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • HTML 61.7%
  • Jupyter Notebook 38.2%
  • Shell 0.1%