Skip to content

Instantly share code, notes, and snippets.

@maiha
maiha / error.log
Created April 9, 2012 01:02
Child Error Task process exit with nonzero status of 1
% hadoop jar /usr/lib/hadoop-0.20/hadoop-examples.jar grep songs.csv output '20'
12/04/09 09:28:04 WARN snappy.LoadSnappy: Snappy native library is available
12/04/09 09:28:04 INFO util.NativeCodeLoader: Loaded the native-hadoop library
12/04/09 09:28:04 INFO snappy.LoadSnappy: Snappy native library loaded
12/04/09 09:28:04 INFO mapred.FileInputFormat: Total input paths to process : 1
12/04/09 09:28:05 INFO mapred.JobClient: Running job: job_201204031541_0033
12/04/09 09:28:06 INFO mapred.JobClient: map 0% reduce 0%
12/04/09 09:28:09 INFO mapred.JobClient: Task Id : attempt_201204031541_0033_m_000003_0, Status : FAILED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:242)
@maiha
maiha / gist:2340650
Created April 9, 2012 01:09
Hadoopの完全分散環境で動くScalaの実コードがあるサイトまとめ
* http://d.hatena.ne.jp/fits/20101010
* http://d.hatena.ne.jp/fits/20101026
* http://www.mwsoft.jp/programming/hadoop/scala_mapreduce_setup.html
* http://www.mwsoft.jp/programming/hadoop/jobtracker_install.html
@maiha
maiha / gist:2354394
Created April 10, 2012 20:52
Test a compress can be used or not
% hbase org.apache.hadoop.hbase.util.CompressionTest foo snappy
12/04/11 05:49:50 WARN snappy.LoadSnappy: Snappy native library is available
12/04/11 05:49:50 INFO util.NativeCodeLoader: Loaded the native-hadoop library
12/04/11 05:49:50 INFO snappy.LoadSnappy: Snappy native library loaded
12/04/11 05:49:50 INFO compress.CodecPool: Got brand-new compressor
SUCCESS
% hbase org.apache.hadoop.hbase.util.CompressionTest foo lzo
12/04/11 05:49:57 INFO lzo.GPLNativeCodeLoader: Loaded native gpl library
12/04/11 05:49:57 INFO lzo.LzoCodec: Successfully loaded & initialized native-lzo library [hadoop-lzo rev 6bb1b7f8b9044d8df9b4d2b6641db7658aab3cf8]
@maiha
maiha / gist:2426632
Created April 20, 2012 06:43
APT-Cache-Limit
# aptitude update
...
パッケージリストを読み込んでいます... エラー!
E: 動的 MMap が範囲を越えました。APT::Cache-Limit の大きさを増やしてください。現在値は 25165824 です (man 5 apt.conf を参照)。
E: yate-scripts を処理中にエラーが発生しました (NewVersion1)
E: Problem with MergeList /var/lib/apt/lists/jp.archive.ubuntu.com_ubuntu_dists_maverick_universe_binary-amd64_Packages
W: Unable to munmap
E: パッケージリストまたはステータスファイルを解釈またはオープンすることができません。
# vi /etc/apt/apt.conf.d/70debconf
@maiha
maiha / gist:3877900
Created October 12, 2012 08:03
awesome_print
##################################################
### Before
irb(main):001:0> Song.limit(2)
Song Load (0.2ms) SELECT "songs".* FROM "songs" LIMIT 2
=> [#<Song id: 5, key: "55197", name: "CONTRADICTION", singer: "ももいろクローバーZ", lyric: "前田たかひろ", music: "大隅知宇", body: "飼い馴らせない欲望を\n恥じるのなら\n�...", created_at: "2012-09-19 22:08:16", updated_at: "2012-09-19 22:29:21">, #<Song id: 6, key: "57767", name: "サンタさん", singer: "ももいろクローバーZ", lyric: "前山田健一", music: "前山田健一", body: " ランランラン…\n\nせーの!\nメリークリ�...", created_at: "2012-09-19 22:08:16", updated_at: "2012-09-19 22:29:21">]
##################################################
### Install
#!/usr/bin/env sh
if ! which md5sum > /dev/null; then
echo Install md5sum
exit 1
fi
if ! which curl > /dev/null; then
echo Install curl
exit 1
@maiha
maiha / rails3-save-without-validations.rb
Created February 14, 2013 05:07
save without validations and callbacks in rails3
begin
klass.skip_callback(:create, :save)
record.save!(:validate => false)
ensure
klass.set_callback(:create, :save)
end
01「オープニング:「第14回ANNA☆Sワンマンライブ」.mpg
02 Jump(ダンスナッツ).mpg
03 Not For Sale(ダンスナッツ).mpg
04 登場.mpg
05 Summer Has Come.mpg
06 ふたハピ.mpg
07 ちゅう.mpg
08 約束.mpg
09 作りかけのパズル.mpg
10 Bud(優奈ソロ).mpg
01 Life goes on.mp3
02 nerve.mp3
03 HAPPY DAYS!.mp3
04 未来へ.mp3
05 ナミダよりもずっと速く.mp3
06 諦めないで.mp3
07 風よはやく.mp3
08 飛び出せ!サマータイム.mp3
09 永遠になれ.mp3
10 Dear My Friend.mp3
00 「第12回ANNA☆Sワンマンライブ」.mpg
01 I Wanna Dance.mpg
02 パジャマドライブ.mpg
03 Over Night Success.mpg
04 Summer Has Come.mpg
05 BUD.mpg
06 夢のトビラ.mpg
07 春風 LoverSong .mpg
08 約束.mpg
09 スマイリングデイズ.mpg