著者
小田 哲 中山 心太 上西 康太 木下 真吾
出版者
一般社団法人電子情報通信学会
雑誌
電子情報通信学会技術研究報告. IN, 情報ネットワーク (ISSN:09135685)
巻号頁・発行日
vol.111, no.409, pp.35-40, 2012-01-19
被引用文献数
1

Hadoopの登場により、安価なハードウェアを用いて大規模なデータに対する高度な分析手段が普及しつつあり、その分析の精度および速度がビジネスの成否を分けるようになってきた。すなわち、大規模かつ高度な分析をリアルタイム化することが重要となる。そこで我々は大規模かつ高度なリアルタイム分析のための分散機械学習フレームワークJubatusをPFI社と共同開発した。Jubatusのゴールは、(a)オンライン機械学習アルゴリズムなどの分析処理をスケールアウトするように分散処理できること、(b)これらの分散処理をアルゴリズム間で共通化すること、(c)これらの分析処理を容易に試行錯誤しながら利用できるようにすること、の3点である。我々は(a)に関してJubatusに高度な分析をスケールアウトさせるための仕組みとして一貫性要件を緩和したmixというデータの同期機構を組み込み、そのスケールアウト性を確認した。本稿ではmixの特徴について解説し、一貫性要件の緩和の程度について検証する。
著者
木下 真吾
出版者
一般社団法人電子情報通信学会
雑誌
電子情報通信学会論文誌. B, 通信 (ISSN:13444697)
巻号頁・発行日
vol.85, no.11, pp.1819-1842, 2002-11-01
被引用文献数
31

配信時の信頼性が求められるファイル等のデータを多数のユーザに効率良く一斉配信するための技術として,リライアブルマルチキャスト(RM)が注目されている.インターネットにおいては,IPマルチキヤストを利用し,その上位レイヤにおいて信頼性保証を行うリライアブルマルチキャストトランスポートプロトコルの研究が活発に行われている.このうち主要なものは既に製品化され,衛星イントラネットを中心に実サービスでの利用も開始されている.一方,インターネットにおけるRMの本格的な普及を目的とし,IETFにおける標準化も1999年から進められている.本論文では,次世代データ配信技術を担うRMの研究,製品化,標準化,それぞれの最新状況と今後の動向について報告する.
著者
石川 憲洋 木下 真吾 高橋 修
出版者
一般社団法人情報処理学会
雑誌
情報処理学会論文誌 (ISSN:18827764)
巻号頁・発行日
vol.41, no.2, pp.245-253, 2000-02-15
被引用文献数
1

インターネット上の新しいサービスとして,プッシュ型情報配信サービスが注目を集めている.しかしながら,これらのサービスの大部分はクライアントが定期的に情報配信サーバにアクセスする「疑似プッシュ型」であり,情報のリアルタイム配信,クライアントの増加に対するスケーラビリティの確保などの課題は解決されていない.一方,プッシュ型情報配信サービスを実現するための基盤技術としてIPマルチキャストが注目を集めているが,現在実験段階にあり,実用化には至っていない.本論文では,IPユニキャスト通信のみをサポートしている現在のインターネット上でプッシュ型情報配信サービスを提供するための新しいアーキテクチャとプロトコルを提案する.我々のアーキテクチャは,情報のリアルタイム配信,クライアントの増加に対するスケーラビリティの確保などのプッシュ型情報配信に対する要求条件を満足することができる.我々のアーキテクチャは,情報配信サーバ,中継サーバ,クライアントから構成される.クライアントの増加に対するスケーラビリティを確保するために,複数台の中継サーバが木構造で接続される構成とした.我々のアーキテクチャを実現するために配信チャネル管理プロトコル(DCMP)と呼ぶ新しいプロトコルを開発した.本アーキテクチャに基づく実装と,そのコンテンツ配信システム(RealPush Network)への適用についても述べる.Push information delivery services have been emerging as a new serviceover the Internet.However, most of those services are pseudo-pushinformation delivery services where clients periodically accessinformation delivery servers.Those pseudo-push information deliveryservices do not resolve issues such as scalability on the increase ofclients and real-time delivery of information.While it is expected thatIP multicast is a core technology for push information delivery servicesover the Internet, IP multicast is now at the experimental stage, andhas not been fully deployed over the Internet at this time.In this paper,we propose a new architecture and protocol for push informationdelivery services over the existing Internet that does not support IP multicast.Our architecture satisfies the requirements on pushinformation delivery, such as scalability on the increase of clients andreal-time delivery of information.Our architecture consists ofinformation delivery servers, relay servers and clients.To retain thescalability of our architecture, multiple relay servers form arelationship that has a tree structure.To realize our architecture, wehave defined a new protocol called Delivery Channel Management Protocol(DCMP). We have implemented a prototype system based on our architecture.In addition, we have develped a contents delivery systemcalled RealPush network, as an application of our architecture.