Greasemonkey/Tampermonkey Edit

table -> csv Edit

他人のページに勝手に「このテーブルをダウンロード」ボタンを付けて、ダウンロードできるようにする工夫。Greasemonkey (Tampermonkey)を初めて知ったときは、「なるほど。こんなことができるんだ」と大いに感激したものだ。以下のスクリプトを使うと、他人のページのテーブルの下部にダウンロードボタンが現れる。押すと、テーブルの内容がCSVファイルでダウンロードされる。

myJCBwithcsvbutton2.jpg

自分のページは自分だけが改変できるし、他人のページはその管理者だけが改変できる、というのは必ずしも正しくない。勝手にボタンを付けることは可能だ(他にもいろいろできる)。ハッキング(不正侵入)とは違う。相手方がこちらのブラウザーに送り届けた画面情報を、こちらのブラウザーの側で変更しているだけだ。相手のサーバー上にあるデータを変更しているわけではないし、相手のサーバーに特別なデータを出させているわけでもない。通常は、相手は、こちらが改変していることを感知できない。(ただし、相手の著作権や商標権の侵害にはなり得るので、改変した画面の二次利用には注意。)

ネットに同等品は幾つかあるが、JCBのサイトでworkしなかったので作った。jQueryを使用。jQueryはGreasemonkey/Tampermonkeyで動く動かないという話があるようだが、少なくとも現時点では最新のChromeブラウザ(Windows)と最新のjQueryの組合せで特に問題ないようだ。2018年 5月

次のライブラリを使用。GitHub - OmbraDiFenice/table2csv: A simple jQuery plugin to convert HTML tables to CSV

// ==UserScript==
// @name        <table> to csv
// @namespace   https://over.6pb.info/
// @include     https://club.dccard.co.jp/*
// @include     https://my.jcb.co.jp/iss-pc/member/*
// @require     https://over.6pb.info/lib/jquery.min.js
// @require     https://over.6pb.info/lib/table2csv.js
// @grant       none
// ==/UserScript==

(function() {
$('table').each(function() {
	var $table = $(this);
	var $button = $("<button type='button'>");
	$button.text("Exp");
	$button.insertAfter($table);

	$button.click(function() {
		$table.table2csv(); //単にダウンロードするならこれだけ
	});
});
})();
  • 実際にJCBの明細(速報)を扱うにはexcludeRows: 'thead tr'を加えた方が良い。
  • この文章を書いた翌日、DCカードの明細(速報)画面に仕様変更があり、上記のコードでは正常にテーブルを取れなくなった。個別のコードが必要。

表の加工 Edit

Google Sheets/Google スプレッドシートが便利だ。

表(Excelなど)から特定の列と行を抽出する Edit

やり方は色々あるが,私がよく使うのはfilter関数。(Google Sheets/Google スプレッドシートのもの。Excelにはない。)軽くて,条件設定も柔軟。例えば,シート1の列Bと列D,列FからG,以上から(このように飛び飛びでもよい),列Aの値が4で,かつ列Cの値が"車"の行だけを取り出すなら

=filter({'シート1'!b:b,'シート1'!d:d,'シート1'!f:g},'シート1'!a:a=4,'シート1'!c:c="車")

UNIXのパイプのようにそのままsortやuniqueをかけられるのも重宝する。

他のファイルから抽出する Edit

これもやり方は色々あるが,私が使うのはimportrangeとquery関数。これに対しimportrangeとfilter関数でも同じことができ、この方がとっつきやすいが、filter関数を使って別ファイルから取り込むには何回もimportrangeを書く必要があり、記述がごちゃごちゃする。(後日、変更があったとき、直すのに手間が増える。)

  • なお、「ファイル」は正確には「spreadsheet」。spreadsheetの中の個別のシートが「worksheet」または「sheet」。

例えば、同じファイルのシートs1から{C5:C,F5:F,T5:U}の列を,N5:N>=5の行に限り,抜き出すなら:

=filter({'s1'!C5:C,'s1'!F5:F,'s1'!T5:U},'s1'!N5:N>=5)

これと同じことを別のファイルに対して行うには:

=query(importrange("https://docs.google.com/...","C5:U"),"select Col1, Col4, Col18, Col19 where Col12>=5")
  • 記法の違い:
    • importrangeは読み込み範囲を飛び飛びで指定できないので,一旦広く取り込む。
    • 取り込んだ列に順にCol1,...の番地が付く。Cは必ず大文字。
    • where以下に行の条件を書く。

親ファイルで作業シートを作り,それを別ファイルでimportしても同じことはできる。2段階で処理する。それならfilterだけで抽出できるので,query関数を新たに覚える必要がない。しかし200万セル制限があるので,作業シートを作る(特に親ファイルで)のはなるべく避けたい。

importrangeするとgetLastRow()はworkしない Edit

シートの最終行を知りたいとき、対象列がIMPORTRANGEで読み込んだ列の場合、getLastRow() はworkしないようだ。998になる。自力で地道に中身を検査する必要がある。

  var col = 1; // 調べる列
  var lastrow = 0;
  var cells = sheet.getDataRange().getValues(); // 実際のシートの大きさ(最終行)を調べる作業変数
  for (var i = 0; i < cells.length; i++) {
    if (!cells[i][col-1].match(/\w/)) { //配列添字なのでcol-1
      lastrow = i; // 現在のcells[i]は空行を指しているので、cells[i-1]が最終行になり、最終行の行番号はi。
      break; //Perlのlastはbreak。continueはnext。
    }
  }

COUNT in ARRAYFORMULA Edit

  • ARRAYFORMULAとcountifは組合せ可能。countaは不可。
  • countifは(ARRAYFORMULAと組む際)「(検索範囲,条件範囲)」の順。
    =UNIQUE(A2:A)=ARRAYFORMULA(countif(A1:A,B2:B14))
    EUREUR20
    EURHKD32
    EURMYR43
    EURSGD15
    EURTWD41
    EURUSD316
    EURCAD2
    EURCNY18
    HKDKRW7
    HKDGBP8
    HKDHRK7
    MYRTHB1
    MYRTRY1
    MYR
    SGD
    以下続

データ変換 Edit

TSV Edit

  • 段落区切りデータや,スペース文字で桁揃えして表のように整形されたデータを,TSVに変換する。その他,行と列の入替え,PukiWiki表への変換などもできる。
  • 例1
    • 入力(データを作る際は段落区切りの方が楽である。TSVへの加工は機械にやらせればよい。)
      銘柄
      コード
      
      エーザイ
      <4523.T>
      
      小野薬品工業
      <4528.OS>
      
      東燃ゼネラル石油
      <5012.T>
      
    • 出力1(TSV)
      銘柄	エーザイ	小野薬品工業	東燃ゼネラル石油
      コード	<4523.T>	<4528.OS>	<5012.T>
      
    • 出力2(行列入替え)
      銘柄	コード
      エーザイ	<4523.T>
      小野薬品工業	<4528.OS>
      東燃ゼネラル石油	<5012.T>
      
  • 例2(スペース文字で桁揃えして表のように整形されたデータ)
    • 入力(人間には意味が取れるが,エクセルには入力できない。)
       1)エーザイ <4523.T>           5.11%           884,659          17
       2)小野薬品工業 <4528.OS>       5.03%           434,449          11
       3)東燃ゼネラル石油 <5012.T>    4.88%           448,755           5
      
    • 出力(TSV)
      1)エーザイ	<4523.T>	5.11%	884,659	17
      2)小野薬品工業	<4528.OS>	5.03%	434,449	11
      3)東燃ゼネラル石油	<5012.T>	4.88%	448,755	5
      
      • コラム数を指定して変換することもできるし,自動認識もできる。場合場合だが,自動の方がうまく行くことが多いようだ(アルゴリズムが違う。)。

ローマ字 Edit

長音 Edit

Unicode code pointcharacterUTF-8 encoding (hex)Unicode character name
U+0100Āc4 80LATIN CA­PI­TAL LET­TER A WITH MACRON
U+0101āc4 81LATIN SMALL LET­TER A WITH MACRON
U+0112Ēc4 92LATIN CA­PI­TAL LET­TER E WITH MACRON
U+0113ēc4 93LATIN SMALL LET­TER E WITH MACRON
U+012AĪc4 aaLATIN CA­PI­TAL LET­TER I WITH MACRON
U+012Bīc4 abLATIN SMALL LET­TER I WITH MACRON
U+014CŌc5 8cLATIN CA­PI­TAL LET­TER O WITH MACRON
U+014Dōc5 8dLATIN SMALL LET­TER O WITH MACRON
U+016AŪc5 aaLATIN CA­PI­TAL LET­TER U WITH MACRON
U+016Būc5 abLATIN SMALL LET­TER U WITH MACRON

添付ファイル: filemyJCBwithcsvbutton2.jpg [詳細]

トップ   編集 凍結 差分 バックアップ 添付 複製 名前変更 リロード   新規 一覧 単語検索 最終更新   ヘルプ   最終更新のRSS
Last-modified: 2018-05-16 (水) 00:11:13 (12d)