Development

まだRDDしか使ってない人へ、DataFrame, Pipelineの要点紹介

Scala

はじめに ナイル株式会社でエンジニアをしている、Maldiniです。今回は「SparkでRDDを中心に開発していてDataFrameはまだよく分からない」という人向けにDataFrameやspark.mlのPipelineについて要点をまと…

Development

PersistentActorの良いところと使い方

Scala

弊社ではAkkaのActorを使って開発している部分があるのですが、Actorは基本的な部分以外はネット上に(日本語の)情報が少なく、公式ドキュメントを読んでもすっきり理解できないことが僕は割とあります。 というわけで、今回は解説していると…

Development

Scalaで自在にログを取る

Scala

ScalaではJavaのライブラリがフルに使えるということで、Javaでも有名なLogback + SLF4J (今回はScalaなので + ScalaLogging)の組み合わせでどのようにログを取ったらいいのかをサンプルコードを見ながら…