H K hirokai

Google sheetsのデータは、URLで共有（限定公開）することでローカルのスクリプトから読み込むことができる。その際、https://docs.google.com/spreadsheets/d/#{sheet_id}/export?format=csv&gid=#{page_id}というURLでアクセスすることで、CSV形式で読み込める。{sheet_id} はワークシートのID、{page_id}はページのIDで、シートを開いた時のURLに表示されているものと同じ。

Rubyでの読み込み

SSLで読み込むために、

require 'openssl'
OpenSSL::SSL::VERIFY_PEER = OpenSSL::SSL::VERIFY_NONE

色々意見はあると思われるが、現状以下の組み合わせが良さそう（更新： 2019/5/30）。

環境：
- Macの場合は、Homebrew → Pyenv → Anacondaという順でインストールするのが良い。（http://qiita.com/oct_itmt/items/2d066801a7464a676994）
IDE/Editor： Visual Studio Codeが設定がほとんど不要，動作が軽く，機能も充実して良い。
ライブラリ：
- 表データ読み込み・操作： Pandas
- 数値計算・画像処理： Numpy, SciPy
- プロット： Matplotlib, Seaborn
データ処理ジョブの依存性管理： Luigi

Wikipediaからジャーナルの省略名を取得するRubyスクリプト

require 'open-uri'
require 'openssl'
require 'nokogiri'

OpenSSL::SSL::VERIFY_PEER = OpenSSL::SSL::VERIFY_NONE

title = "European Journal of Pharmaceutical Sciences"

Wikipediaからジャーナルの省略名を取得するRubyスクリプト

require 'open-uri'
require 'openssl'
require 'nokogiri'

OpenSSL::SSL::VERIFY_PEER = OpenSSL::SSL::VERIFY_NONE

title = "European Journal of Pharmaceutical Sciences"

SciPyで任意の関数にカーブフィッティング

レーベンバーグ・マーカート法による非線形最小二乗法でのフィッティングをscipy.optimize.curve_fitで行うことができる。

以下は、シグモイド関数にフィッティングする例。

import numpy as np
from scipy.optimize import curve_fit
import matplotlib.pyplot as plt

FFmpegで動画から一定時間間隔のスナップショットを取得する

FFmpegは動画の変換や静止画との変換などが行えるコマンドラインツール。様々なフォーマットに対応しているので便利。

インストール

ここからバイナリをダウンロードして適当なフォルダに置き、パスを通す。
あるいはMacPortsやHomeBrewを使っているならば、sudo port install ffmpegやbrew install ffmpegでも良い。

私自身は、バイナリをダウンロードして使用している。

	#!/usr/bin/env python

	import matplotlib.pyplot as plt
	import glob
	import csv


	y_mins = []
	file_list = glob.glob('*.csv')
	print('Reading %d files...\n' % len(file_list))

	# tools_fiji.py

	from ij import ImagePlus, ImageStack, IJ

	print('tools_fiji.py loaded.')


	# Image load/save

	# Open a list of files.

	// Requires:
	// http://3rd.geocities.jp/kaito_extra/Download/MouseEmulatorDLL.zip

	var sh = new ActiveXObject( "WScript.Shell" );

	function click(x,y,_delays){
	var delays = _delays \|\| [0,100,0];
	WScript.Sleep(delays[0]);
	sh.Run( "rundll32.exe MouseEmulator.dll, _SetMouseXY@16 "+x+", "+y );
	WScript.Sleep(delays[1]);

	import os.path, time
	from datetime import timedelta
	import glob

	delta = 7*60+41
	folder = '/path/to/folder'

	for file in glob.glob(os.path.join(folder,'*.JPG')):
	print(file)
	print "last modified: %s" % time.ctime(os.path.getmtime(file))