hivemallで機械学習を行った結果をVisualizeするのに、RStudioからhiveserver2にアクセスできると便利かなと思ったので。RStudioServerのセットアップからhiveserver2への接続までの流れを整理してみました。RとRStuidoServerのセットアップyumへのepelの追加以下のようにして、yumにepelのリポジトリを追加します。<div class...
CentOS7にApache Hadoop及びHiveを擬似分散モードでセットアップする手順のメモです。hiveのmetastoreにはmariadb(mysql)を使用します。CentOS7はminimaldvdからデフォルト状態でインストールした前提です。使用したDVDイメージ: CentOS-7-x86_64-Minimal-1511.iso以下の流れでセットアップをしていきます。前提となる設定など</...
この記事は、IoTLT Advent Calendar 2016 の10日目の記事です。IoTLT Advent Calendar 2016http://qiita.com/advent-calendar/2016/iotlt今年(2016年)の8/12に開催されたIoTLTでLTした、「TensorFlowで遊びながら学んだ...
この記事は、Milkcocoa Advent Calendar 2016 の5日目の記事です。Milkcocoa Advent Calendar 2016http://qiita.com/advent-calendar/2016/milkcocoaMilkcocoaを使って何か作ろうと思っていたのですが、python ...
pythonで開発をしていると、機械学習など試してみたいライブラリによく遭遇します。ライブラリの評価は、普段利用している環境とは別の一時的な環境で行いたいことが多いので、独立した環境を作成・管理出来ると便利です。が、pythonのバージョンや環境を管理するツールがいくつかあり、環境構築の際に混乱してしまったので、私が現状行っている方法のセットアップ手順をメモに残しておきます。具体的には、以下の記事の「3. pyenv-virtua...
先日(10/11)に、IoTLTでLTしてきたので、LTの準備をする中で得た知識などを、このエントリで整理しておきます。発表自体は、全力でネタです。IoT縛りの勉強会! IoTLT vol.20 @ ウフルhttp://iotlt.connpass.com/event/38815/アグリゲート・コンピューティング風I...
以下のサイトで紹介されているように、ESXi6.0 Update 2では、Webベースのクライアントが提供されているので、MacOSからも扱いやすくなりました。ESXi6.0 Update 2 からESXiホスト単体のWeb Client が提供されています。 | 自由人なエンジニアの備忘録http://japan-vmware...
Windowsから、gitを利用したり、linuxへのssh接続を行うterminal環境のセットアップ手順メモです。私は、普段の開発では、MacOSXを利用しているので、なるべく、MaxOSXと同じ様に使える様に環境を作ることにします。このエントリでは、以下流れで環境をセットアップします。MSYS2とminttyをセットアップgitをセットアップtmuxをセットアップ<...
単体検査などで使うWebAPIスタブを作る時などは、わざわざtomcat上にwarをデプロイするのは面倒なので、javaコマンド一発で実行できるようにしたいです。そこで、このエントリでは、jettyをembedしてServletを動かす手順をまとめておきます。このエントリでは、以下流れでモジュールを作っていきます。ビルド定義にjettyを追加sbt-assemblyの設定とメインク...
MacOSX上のRStudio Previewで、R Notebookを使ってみたので、利用するまでの手順をメモに残しておきます。このエントリで試したのは、以下の点です。RとRStudioPreview版のインストールRStudioからR Notebookのサンプルを表示作成したR NotebookをGitHub Pagesで公開するMySQLに保存されたデータを使ってNoteb...
hivemallのロジスティック回帰のサンプルを動かすまでの流れのメモです。Hadoopとhiveのセットアップサンプルのデータセットとhivemallのダウンロードサンプル(logistic regression)を動かしてみる試すサンプル:<a href="https://github.com/myui/hivemall/wiki/a9a-binary-classification...
以下のチュートリアルを参考に、HiveのUDFを書いてみたので、作り方のメモを残しておきます。HivePlugins | cwiki.apache.orghttps://cwiki.apache.org/confluence/display/Hive/HivePluginsUDF, UDAF...
昨日(9/3)、「フリーランスミートアップ」にお邪魔してお話を聞いてきたので、感想などをまとめておきます。フリーランス ミートアップhttp://connpass.com/event/34460/<img src="https://connpass-tokyo.s3.amazonaws.com/thumbs/e4/b5/e4b5f3fa2d358a06722...
MacOSX上に、jupyter notebookとr-essentialsをセットアップする手順をメモとして残しておきます。jupyter notebookのインストールは、以下を参考にしています。Installing Jupyter Notebookhttp://jupyter.readthedocs.io/en...
一昔前までは、facebookと言えば、「○○さん達と飲み会しました、盛り上がって楽しかったです」といったような、いわゆる『リア充アピール』をする場所でした。ところが最近では、そういった中身の無い投稿ばかりでは、facebookを開く価値がなさ過ぎるからなのか、リア充アピールの必死さが痛々しすぎるからなのか、そういった投稿を見ることはほとんど無くなってきました。世の中にはいろいろなSNSがあり、それぞ...
