Apache Arrowが解決したい問題、設計方針、速さの秘密、現在できること、今後できるようになることなど、Apache Arrowを知らない人でもApache Arrowのことがわかるようになる説明をします。

Apache Arrowが解決したい問題、設計方針、速さの秘密、現在できること、今後できるようになることなど、Apache Arrowを知らない人でもApache Arrowのことがわかるようになる説明をします。

Apache Arrowの開発に参加したい人のためにApache Arrowの情報を紹介します。

2019年12月時点のApache Arrowの最新情報を紹介します。

細胞分化の軌跡推定に関するソフトウェアTreefitのパッケージまわりについ て紹介します。

16期目のクリアコードでなにをやりたいか

17期目のクリアコードでなにをやりたいか

CROSS 2015のセッション「全文検索エンジン群雄割拠〜あなたが使うべきはどれだ！〜」でGroongaと他の全文検索エンジンとの違いの説明です。

Apache Arrowはデータ分析システム間でのデータ交換を効率化することを目的としたデータフォーマットです。pandasやApache SparkやRなど主要なデータ分析システムはApache Arrowの対応を進めています。近い将来、データ分析システム間でのデータ交換はApache Arrowを使う状態になるでしょう。RubyもApache Arrowに対応することで既存のデータ分析システムとデータ交換できるようになります。これで、Rubyもデータ分析システムの一部でデータ処理をできるようになります！

Apache Arrow、Red Arrow、Red Data Toolsという観点からRubyにおけるデータ処理の現状を説明します。

ビッグデータは現実的な時間で処理できてこそ活きます。処理時間はデータ処理アルゴリズムの計算量だけで決まり…ません！適切なノードにデータを配置しないとそもそもデータ処理できませんが、大量ノードが協調するビッグデータ処理ではデータ移動コストを無視できません。Apache Arrow Flightを使えばネットワーク帯域限界まで高速にデータ転送できます。 このセッションではApache Arrow Flightの仕組みおよび利用例として分散計算プラットフォームApache Arrow Ballistaを紹介します。

2020年代、ビッグデータをどう扱えばよいか。今は各プロダクト毎に効率的な扱い方を実装していますが、2020年代はそんな時代ではありません！ビッグデータの扱いでも、共通で必要なものはプロダクトを超えて協力して開発して共有する、そんな時代です！ビッグデータのための共通基盤、それがオープンソースのApache Arrowです。AmazonもGoogleもNVIDIAも開発に参加しています。 このセッションではApache Arrow開発チームの主要メンバーがApache Arrowフォーマットがなぜ速いのかを説明します。

MySQLとPostgreSQLの全文検索機能は高速でリッチな全文検索システムを作るには機能・性能不足です。外部の全文検索サービスを利用することでそんなシステムを作れますが、複数の場所で同じデータを管理するためシステムの開発と運用が複雑になります。MySQL・PostgreSQLだけで作れれば…そこでMroonga・PGroongaです。Mroonga・PGroongaを使ってMySQL・PostgreSQLだけで高速でリッチな全文検索システムを作る方法を紹介します。

ナイーブな全文検索は単なる中間一致検索です。しかし、現実に人が入力するテキストは揺れまくっているので単なる中間一致検索では必要な情報を見つけられません。たとえば、「(090)1234-5678」も「０９０ー１２３４ー５６７８」も「09012345678」もすべて同じ電話番号として扱いたいのが現実です。 MySQLとPostgreSQLの全文検索機能ではこのようにゆるい全文検索を高速に実現することができません。そこでMroonga・PGroongaです。Mroonga・PGroongaを使ってMySQL・PostgreSQLだけで高速にゆるく全文検索する方法を紹介します。

2012年6月23日に行われた大統一Debian勉強会でRabbitを紹介したスライドです。 Rabbitの特徴であるプレゼンを時間内に終わることを支援する機能を中心に紹 介します。

DevLOVE 2012での「リーダブルコードを読んだ後」というセッションで説明のために使ったスライドです。セッションの内容は、リーダブルコードに書かれていることを実際に使うためにはどうすればよいかということを実際にやってみるというものです。ワークショップ形式のセッションです。

ビジネスアプリケーションにおいても高速／堅牢な、保守性の高いプログラミングが求められています。 去年は「リーダブルなコード」に注目が集まりましたが、具体的に開発者へどんなメリットをもたらすのでしょうか？また、「リーダブルなコード」のコンセプトや手法は現場へ導入可能なのでしょうか？ 本セッションでは、リーダブルなコードの概要を紹介した上で開発者にとってのメリットと現場導入について考察します。

GroongaからDroongaに移行した後、どんな世界が待っているかを説明します。例えば、どのように運用すればよいか、どのようなケースが得意か、今後どのような機能を強化していくなどです。

みなさんはWordPressに投稿したたくさんのコンテンツを有効活用できていますか？ せっかくのコンテンツも投稿しただけで終わらせてはもったいありません。「全文検索」を使うとWordPressに投稿したコンテンツをもっと活かすことができます。 たとえば、高速に検索できるようになり、必要なときに必要なコンテンツをみつけることができます。 たとえば、関連している投稿を機械的に見つけることができるようになり、関連している投稿をすいすい参照することができます。 本格的な全文検索システムMroongaをWordPressに組み込めば、自分のWordPressに自分用の「Google」がついたかのようになります。さぁ、全文検索を活用してWordPressのコンテンツをもっと有効活用しましょう！

第7回フクオカRuby大賞本審査用の資料です。「全文検索エンジンGroongaへのmrubyの組み込み」という応募の説明です。 次の3つの項目を含んでいます。 (1) 特徴を表現するもの (2) Rubyを適用した箇所 (3) Rubyを活用したことによる効果、社会に及ぼす影響