2015-05-22-build-a-real-time-analytic-dashboard-with-solr-search-and-spark-streaming-2.md 3.6 KB


title: SearchとSpark Streamingでリアルタイムの分析ダッシュボードを構築する author: Hue Team type: post date: 2015-05-22T07:17:57+00:00 url: /build-a-real-time-analytic-dashboard-with-solr-search-and-spark-streaming-2/ sf_thumbnail_type:

  • none sf_thumbnail_link_type:
  • link_to_post sf_detail_type:
  • none sf_page_title:
  • 1 sf_page_title_style:
  • standard sf_no_breadcrumbs:
  • 1 sf_page_title_bg:
  • none sf_page_title_text_style:
  • light sf_background_image_size:
  • cover sf_social_sharing:
  • 1 sf_sidebar_config:
  • left-sidebar sf_left_sidebar:
  • Sidebar-2 sf_right_sidebar:
  • Sidebar-1 sf_caption_position:
  • caption-right sf_remove_promo_bar:
  • 1 sf_custom_excerpt:
  • 'Searchは、対話的にデータを探索するための素晴らしい方法です。Searchアプリは継続的に改善されており、今ではリアルタイム用のより良い対応が付属しています!' categories:
  • Hue 3.9
  • Search
  • Spark
  • Tutorial
  • Video

Searchは対話的にデータを探索するための素晴らしい方法です。Searchアプリは継続的に改善されており、今ではリアルタイム用のより良い対応が付属しています!

このビデオではSpark Streamingでツイートを収集し、それらをSpark SolrアプリでSolrに直接インデキシングしています。私たちが多くのツイート情報を付与する、わずかに変更したバージョンを使用していることにご注意ください。

{{< youtube qnGEx-3Refg >}}

 

あなたはツイートがローリングするのを見ることができるでしょう!以前のバージョンと比較すると:

  • ダッシュボードは任意のページにジャンプすることなく、データが変更された時にウィジェットのみを更新する
  • ダッシュボードはN秒毎に自動でリフレッシュできる
  • 主要な日付フィルタは、すべてのダッシュボードでローリングの日時範囲を素早く選択できる

 

live-search

Tweets coming in

 

総括

ほぼリアルタイムでデータをインデキシングする別のやり方がありますが、私たちは、Spark StreamingとSolrアプリだけで追加の設定することなく動作するシナリオとしてこのアプローチに取り組みました。次回は、Solr 5.2の新しい分析機能をプレビューし、いくつかのデータをインデックスするためにPythonとSparkをどのように使用するかの方法を紹介します!

いつものように、コメントとフィードバックは hue-user メーリングリストや@gethueまでお気軽に!