NY 日本人IT技術者日記

Scala - ワードカウント

SparkではreduceByKeyで簡単にワードカウントができるが，scalaではfoldLeftで実装出来る． val x = """kiji,saru,saru#saru,inu,kiji,saru#inu,kiji,kiji#kiji#inu,inu#sar...

2015/12/30 15:59

scala - ディレクトリのファイル操作

妻のパソコンの，とあるフォルダにある画像ファイルのタイムスタンプが何故かおかしくなってしまった．ファイルの数が膨大ということもあり，scalaでさっとコードを書いて修正した． import java.io.File import java.time.{LocalDateTi...

2015/12/29 14:44

Scala - 乱数生成プロバイダを用いるstream

val r = new Random(System.currentTimeMillis()) def rand(max:Int):Stream[Int] = Stream.cons(r.nextInt(max), rand(max)) rand(100)...

2015/12/28 07:53

Scala - Enumeration

ScalaでEnumerationを継承してenumを定義する例． object Weekdays extends Enumeration { type WEEKDAY = Value val MON, TUE, WED = Value } object MyMa...

2015/12/25 15:58

Scala - akka アクタ

Akka actorのサンプルメモ.. import akka.actor._ /** * Created by neko32 on 2015/12/23. */ sealed abstract trait Message case class Request(...

2015/12/24 14:56

Scala - Mixin, traitそしてselfによる型間依存関係の表現

Scalaのmixinとtraitそしてselfアノテーションを利用することにより，Javaと比較してより明快に型間の依存関係を宣言出来る．Javaではミックスインが出来ない為，クラス間の依存関係はあるクラスのprivate or protectedフィールドとして表現されている...

2015/12/23 16:19

Scala - visitorパターンのようなもの

ScalaではVisitorパターンを割合簡潔に書くことが出来る．以下の例はあるデータベース上で接続・検索を実行するモジュールで，この例では通常のRDB, HiveそしてインメモリDBをサポートしているとする．また，(乱暴ではあるが簡略のために)RDBとHiveserver2はコ...

2015/12/21 08:13

scala - tailrecアノテーション

scalaではtailrecアノテーションを使って末尾再帰の最適化をすることができる． 関数は再起呼び出しで終わっている必要がある． @tailrec def fact(i:BigInt, accm:BigInt):BigInt = { i match { ...

2015/12/15 07:03