isdyy

コマンドラインツールのインストール

$ easy_install bigquery
$ bq init

ロード(テーブル作成・データ投入; project と dataset までは作成済みという前提)

$ bq load --source_format=NEWLINE_DELIMITED_JSON mydataset.nested01 nested01.data.json nested01.fields.json
Waiting on job_d7ebcad03b8247fc8b6f8313f0689a28 ... (26s) Current status: DONE

isdyy

Logging Flow

忘れてしまいがち

• http://docs.python.org/2/howto/logging.html#logging-flow
• http://docs.python.org/3/howto/logging.html#logging-flow
• python2, 3 でフローは同じ
• 3 だと logging.setLogRecordFactory() で LogRecord の生成もフックできるようになってる

Adding contextual information

• http://docs.python.org/2/howto/logging-cookbook.html#adding-contextual-information-to-your-logging-output
• http://docs.python.org/3/howto/logging-cookbook.html#adding-contextual-information-to-your-logging-output

isdyy

# -*- coding: utf-8 -*-

import os
import sys
import argparse
import logging
import shutil
import tempfile
import urllib

isdyy

#!/usr/bin/env python2.7
# -*- coding: utf-8 -*-
# vim:et ts=4 ff=unix:
"""Simple/handy website downtime detection (using curl and sendmail)"""

import argparse
import datetime
import email
import email.utils
import json

isdyy

#!/bin/sh
# For OSX VPN custom routing
#
# Place this file at /etc/ppp/ip-up, edit its CIDRs, and enter following:
#   shell> sudo chmod +x /etc/ppp/ip-up


# VPN gateway
if [ "${5:-}" = "192.168.100.1" ]
then

isdyy

# -*- coding: utf-8 -*-


def ngram_word_split(u):
    return u.split()


def ngram_split(u, n):
    length = len(u)
    pos = 0

isdyy

<?php

/**
 * Non PHP like querystring parser / container
 *
 * param1=foo&param2=bar&param1=baz
 * => array([param1] => array(foo, baz), [param2] => array(bar)
 */
class QueryData
{

isdyy

class TestOrder(object):
  def test_hook(self):
    pass
    
  def setup_method(self, method):
    print 'setup_method'
    
  def setup(self):

isdyy

# -*- coding: utf-8 -*-
import logging
import os

logger = logging.getLogger()


def read_record_from_backup(filename):
    try:
        from google.appengine.ext.mapreduce import records

isdyy

Modules のリクエストルーティング, TaskQueue のTask 実行モジュールとバージョンについて (2015.06)

Basics

リクエストのルーティングについて:

https://cloud.google.com/appengine/docs/python/modules/routing

1. URLによるモジュール・バージョン(・インスタンス)指定
   • URL で module, version (, instance) を指定できる.

• URL に module, version (, instance) を併記した指定は、dispatch.yaml の指定より優先される.