HiveQL Tips

Hive では、サイズの大きなテーブルをJOINする。 Hiveは、クエリの最後に出てくるテーブルを最大のテーブルと仮定し、 レコード結合をしながら他のテーブルをバッファした後、最後のテーブルをストリーム化しようとする。 ■巨大なテーブルをJOINする場合 年月日でPartitionが区切られているtable_largeをJOINする時、 以下のようなクエリだと、JOINが先に評価され、JOIN後にWHERE節が働きます。 <figure... [Read More]

quasi-Newton method

C++

1. 準ニュートン法とは 1.1 はじめに 高速に局所的最適解を求められる古典的手法です。 「準」と付いている通り,その更新式はニュートン法の式を準えています。 <h4... [Read More]

Homebrew commands

brew update と brew upgrade は、なるほどッて感じ。 brew link と brew unlink も知っとくと一時的なエラー対処にも便利。 <th... [Read More]

Latex with vim

tex使うことになった、もちろんエディタはvim! 【手順】 1. .vimrc.texの準備 <table... [Read More]