Python 101 для начинающих ботаников данных

Первоначально Написал Джон Хэмминк

Как ученый, работающий с данными, или любой, кто заинтересован в сборе данных по этому вопросу, несомненно, полезно знать о том, как собирать данные в вашем приложении — данные, которые вы захотите позднее запрашивать и анализировать.

Здесь мы создадим приложение на Python из AZ, итерируем его, чтобы сделать его более надежным, и, наконец, добавим регистрацию событий приложения с помощью Fluentd и Treasure Data. Мы выбрали Python, потому что он быстро становится языком выбора среди начинающих ученых данных. В наших примерах мы будем использовать Python версии 2.7.

В следующем разделе мы рассмотрим еще больше языков программирования и сред, а также визуализацию (используя такие инструменты, как Tableau и Chartio), но сейчас давайте начнем с изучения некоторых основ Python, прежде чем перейти к сбору данных.

Камень, ножницы … бумага?

Для нашего примера сегодня мы создадим базовое приложение « камень, бумага, ножницы» . (Что касается вас, ищущих работу, то это может или не может быть тем, о чем вас спросят в случайном интервью по кодированию, поэтому обратите внимание!) С его помощью мы будем собирать данные о:

• игрок
• Выбор
• решение суда

Для тех из вас, кто не знаком с концепцией Rock-Paper-Scissors, давайте спросим Википедию :

Камень-ножницы-бумага … — это игра с нулевой суммой, в которой каждый игрок одновременно формирует одну из трех фигур вытянутой рукой. Этими формами являются «камень» (простой кулак), «бумага» (плоская рука) и «ножницы» (кулак с указательным и средним пальцами, образующими букву V). В игре есть только три возможных результата, кроме ничьей: игрок, решивший сыграть в рок, побьет другого игрока, выбравшего ножницы («ножницы для дробления камня»), но проиграет тому, кто играл в бумагу («бумага покрывает камень») ; игра бумаги проиграет игре ножниц («ножницы режут бумагу»). Если оба игрока бросают одну и ту же фигуру, игра завязывается и обычно сразу переигрывается, чтобы разорвать ничью.

Что касается меня, я изучил игру, наблюдая, как несколько детей играют в нее на улице перед моим домом. Возможно, также было проведено собеседование по кодированию.

Основное приложение

import random

tie= "a tie"
p1 = "Player 1; Player 2 loses"
p2 = "Player 2; Player 1 loses"

myDict = {('rock', 'rock') : tie, ('rock', 'paper') : p2,
('rock', 'scissors') : p1, ('paper', 'rock') : p1, ('paper', 'paper') : tie, ('paper', 'scissors') : p2, ('scissors', 'rock') : p2, ('scissors', 'paper') : p1, ('scissors', 'scissors') : tie }

def throw(player1, player2):
    verdict = myDict[(player1, player2)]
    print "The game goes to " + verdict

print "Ya wanna play Rock, Paper, Scissors?"
player1 = raw_input("Throw!  Choose 'rock', 'paper', or 'scissors': " )
print "Player 1 chooses: " + player1
player2 = random.choice(['rock', 'paper', 'scissors'])
print "Player 2 chooses: " + player2
throw(player1, player2)

$ python rsp.py

Ya wanna play Rock, Paper, Scissors?
Throw!  Choose ‘rock’, ‘paper’, or ‘scissors': rock
Player 1 chooses: rock
Player 2 chooses: scissors
The game goes to Player 1; Player 2 loses

Throw!  Choose ‘rock’, ‘paper’, or ‘scissors': moar paper
Player 1 chooses: moar paper
Player 2 chooses: rock
Traceback (most recent call last):
File “rsp.py”, line 21, in <module>
throw(player1, player2)
File “rsp.py”, line 13, in throw
verdict = myDict[(player1, player2)] KeyError: (‘moar paper’, ‘rock’)

def lets_get_started():
  try:
     player1 = raw_input("Throw!  Enter 'rock', 'paper', or 'scissors': " )
     print "You chose: " + player1
     player2 = random.choice(['rock', 'paper', 'scissors'])
     print "The computer chose: " + player2
     throw(player1, player2)
  except KeyError:
     print "Hey!  I said enter 'rock', 'paper' or 'scissors'!  Try again."
     lets_get_started()

import random

tie= "is a tie"
p1 = "goes to you; the computer loses."
p2 = "goes to the computer; you lose."

myDict = {('rock', 'rock') : tie, ('rock', 'paper') : p2,
('rock', 'scissors') : p1, ('paper', 'rock') : p1, ('paper', 'paper') : tie, ('paper', 'scissors') : p2, ('scissors', 'rock') : p2, ('scissors', 'paper') : p1, ('scissors', 'scissors') : tie }

def throw(player1, player2):
     verdict = myDict[(player1, player2)]
     print "The game " + verdict

def lets_get_started():
  try:
     player1 = raw_input("Throw!  Enter 'rock', 'paper', or 'scissors': " )
     print "You chose: " + player1
     player2 = random.choice(['rock', 'paper', 'scissors'])
     print "The computer chose: " + player2
     throw(player1, player2)
  except KeyError:
     print "Hey!  I said enter 'rock', 'paper' or 'scissors'!  Try again."
     lets_get_started()

print "Ya wanna play Rock, Paper, Scissors?"
lets_get_started()

 $ curl -L http://toolbelt.treasuredata.com/sh/install-ubuntu-trusty-td-agent2.sh | sh

  type tdlog
  apikey 5919/
  auto_create_table
  buffer_type file
  buffer_path /var/log/td-agent/buffer/td
...

cookie@monster-ThinkPad-X1:~omnomnom/python$ sudo /etc/init.d/td-agent restart

 $ pip install fluent-logger

from fluent import event
…
event.Event('game_data', {'player': 'Player 1', 'choice': player1 })

from fluent import sender
from fluent import event

sender.setup('td.rsp_db', host='localhost', port=24224)

  event.Event('game_data', {
     'verdict': verdict
  })

  event.Event('game_data', {
     'player': 'Player 1',
     'choice': player1
  })

$td table:tail rsp_db game_data
{“time”:1429579380,”player”:”Player 2″,”choice”:”paper”}
{“time”:1429579383,”player”:”Player 1″,”choice”:”scissors”}
{“time”:1429579383,”verdict”:”goes to you; the computer loses.”}
…

$ kill -USR1 cat /var/run/td-agent/td-agent.pid

Select * from game_data