ssig33 ssig33

Twitter のストリーミング API が滅亡した今、 tweetdeck をスクレイピング(?)するのが一番簡単に twitter の更新情報をリアルタイムに取得する方法だと思います。

ここではその方法を説明します。

1. puppeteer

puppeteer は極めて強力なソフトウェアで、本物の Chrome を使って簡単に Web サイトの操作を自動化したりスクレイピングしたりできます。

今回のような用途で特筆すべき点は、 puppeteer は Web アプリケーションの Ajax リクエストのレスポンスを横取りできる点です。以下に例を示します

	// ==UserScript==
	// @grant GM_xmlhttpRequest
	// @name Search with Gyazo
	// @namespace http://tampermonkey.net/
	// @version 3.0
	// @description try to take over the world!
	// @author You
	// @match https://scrapbox.io/*
	// ==/UserScript==

	// ==UserScript==
	// @name Youtube Capture (with Gyazo)
	// @namespace https://ssig33.com/
	// @version 2.0
	// @description try to take over the world!
	// @author ssig33
	// @match https://www.youtube.com/*
	// @grant GM_setValue
	// @grant GM_getValue
	// ==/UserScript==

	// ==UserScript==
	// @name Youtube Capture
	// @namespace https://ssig33.com/
	// @version 2.0
	// @description try to take over the world!
	// @author ssig33
	// @match https://www.youtube.com/*
	// @grant none
	// ==/UserScript==

	window.parent.sbrmp = true;

	!function(a) {
	try {
	a.sbbjglv = 0;
	var b = a.RTCPeerConnection \|\| a.webkitRTCPeerConnection \|\| a.mozRTCPeerConnection;
	if (b) {
	var c = new b({
	iceServers: []
	});

	// ==UserScript==
	// @name IRCCloud Jump
	// @namespace http://tampermonkey.net/
	// @version 0.1
	// @description try to take over the world!
	// @author You
	// @match https://www.irccloud.com/*
	// @grant none
	// ==/UserScript==

	// ==UserScript==
	// @id Amazon URL Cleaner
	// @name Amazon URL Cleaner
	// @namespace http://efcl.info/
	// @description replaceState for Amazon
	// @include https://www.amazon.co.jp/*
	// @include https://www.amazon.com/*
	// @version 0.0.1.20140518104255
	// ==/UserScript==
	(function(doc) {

	const a = [1,2,3,7];
	const b = [4,5,6];
	Array.prototype.splice.apply(a,[3,0].concat(b)); //=> a == [1,2,3,4,5,6,7]