Skip to content

Instantly share code, notes, and snippets.

View eiichi-worker's full-sized avatar

藤本|猫おじさん|Eiichi eiichi-worker

View GitHub Profile
@eiichi-worker
eiichi-worker / memo_2017-06-01_003.md
Created June 1, 2017 11:18
VS Codeでテキストの重複行を削除する
  1. 行をソートする
  2. 重複行を正規表現で置換する

ソート F1 → 「>昇順」と入力 「行を昇順に並び替え」を選択

置換 「Ctrl + F」で検索ボックス

@eiichi-worker
eiichi-worker / memo_2017-06-06_001.md
Created June 6, 2017 06:06
MACのJIS配列キーボードで「\ (バックスラッシュ)」を入力する

MACのJIS配列キーボードで「\ (バックスラッシュ)」を入力する

option + ¥

@eiichi-worker
eiichi-worker / memo_2017-06-07_001.md
Last active June 7, 2017 01:15
1000本ノック「DNS」

DNS

今日はあらためてDNS

Domain Name System
どめいん ねーむ しすてむ

http://example.com ってやつをもらってもPCはどこ(IP)にアクセスすればいいかわからない!! example.com(Domain)をIPに変換するのがDNS!

@eiichi-worker
eiichi-worker / memo_2017-06-08_002.md
Last active October 9, 2017 16:40
[ブログ済み] HIVEで形態素解析するときに、不要と思われる文字列は除外していくクエリ

HIVEで形態素解析するときに、不要と思われる文字列は除外していくクエリ

SELECT *,word
FROM {table}
LATERAL VIEW explode(tokenize_ja({text_column})) t AS word
WHERE 1=1
AND word not rlike '^[a-zA-Z0-9]{1}$' -- 除外 英語一文字
AND word not rlike "^[!-9@_]*$" -- 除外 数字記号のみ
@eiichi-worker
eiichi-worker / memo_2017-06-14_001.md
Last active June 14, 2017 00:45
100本ノック「HTTP」

HTTP

Hypertext Transfer Protocol(ハイパーテキスト・トランスファー・プロトコル)

  • HTTP(ステートレス)
  • RFC6265(ステートメントなんとかメカニズム)  - Cookie

HTTP1.1

@eiichi-worker
eiichi-worker / memo_2017-06-16_001.md
Created June 16, 2017 00:55
WIP 100本ノック「Hadoop」

Hadoop

Hadoop1系 HDFS | MapReduce
Hadoop2系 HDFS | YARN | MR2 | HiveとかPigとか

残りは後日。。。。

localで試すメモ 参考

@eiichi-worker
eiichi-worker / memo_2017-06-28_001.md
Created June 28, 2017 00:40
100本ノック「DAG」

DAG (Directed acyclic graph)

幾つかのノードがつながっているタイプのやつ

Directed acyclic graph 有向 非巡回 グラフ

有向グラフ
A --- B

We couldn’t find that file to show.
@eiichi-worker
eiichi-worker / memo_2017-07-05_001.md
Last active July 5, 2017 00:49
100本ノック ASID、CAP、BASEについて

100本ノック ASID、CAP、BASEについて

ASID

トランザクションについて

  • 原子性(Atomicity)
  • 一貫性(Consistency)
  • 独立性(Isolation)
  • 永続性(Durability)