Apache Spark a unified analytics engine for big data processing. |
Apache Spark a unified analytics engine for large-scale data processing. |
出典: Apache Spark 『フリー百科事典 ウィキペディア日本語版(Wikipedia)』 最終更新 2018年5月24日 (木) 06:26 UTC、URL: https://ja.wikipedia.org/ Apache Sparkはオープンソースのクラスタコンピューティングフレームワークである。カリフォルニア大学バークレー校のAMPLabで開発されたコードが、管理元のApacheソフトウェア財団に寄贈された。Sparkのインタフェースを使うと、暗黙のデータ並列性と耐故障性を備えたクラスタ全体をプログラミングできる。 [概要] フォールトトレラントシステムで管理され、複数マシンのクラスタに分散されたデータ項目の読み取り専用多重集合であるRDD(resilient distributed dataset)と呼ばれるデータ構造を中心とするアプリケーションプログラミングインターフェイスを備えている。 ・・・ Spark Core プロジェクト全体の基盤であり、RDD抽象化を中心とするアプリケーションプログラミングインターフェイス(Java、Python、Scala、R)を介して公開される分散タスクディスパッチ、スケジューリング、および基本I/O機能を実装している。(Java APIは他のJVM言語でも使用でき、Juliaなどの他の非JVM言語でも使用できる。)「ドライバ」プログラムは、関数をSparkに渡すことによってRDD上でmap、 filter 、reduceなどの並列操作を呼び出し、関数の実行をクラスタ上で並列にスケジュールする。 ・・・ |
出典: ビッグデータ 『フリー百科事典 ウィキペディア日本語版(Wikipedia)』 最終更新 2018年3月6日 (火) 14:15 UTC、URL: https://ja.wikipedia.org/ ビッグデータ(英: big data)とは、一般的なデータ管理・処理ソフトウエアで扱うことが困難なほど巨大で複雑なデータの集合を表す用語である。ビッグデータを取り巻く課題の範囲は、情報の収集、取捨選択、保管、検索、共有、転送、解析、可視化等多岐にわたる。 [概要] データの上限:コンピュータの性能に上限があるように、我々が取り扱えるデータ量の大きさにも上限がある。2012年現在、現実的な時間内に処理することが可能なデータサイズの上限は、エクサバイトのオーダーとされる。換言すると、我々は事実上これ以上のデータは扱えないという制限を抱えていると言える。 ・・・ |
同義語・類義語 | 関連語・その他 |
---|---|
Apache Spark | Hadoop |
əpɑ́ʃ spɑ́rk | hæ̀dú:p |
アゥパチィー スパァーク | ハェドュープ |
アゥパチィー・スパァーク | ハェ̀ドュ́ープ |
アゥパ́チィー・スパァ́ーク | ハドゥープ |
アパッチ スパーク | ハ̀ドゥ́ープ |
アパッチ・スパーク | Apache Hadoop |
アパッ́チ・スパ́ーク | ・ |
Spark | Matei Zaharia |
spɑ́rk | ビッグデータ解析 |
スパァーク | ・ |
スパァ́ーク | unified |
スパーク | júːnifàid |
スパ́ーク | ユニファイドゥ |
https://spark.apache.org/ | ユ́ニファ̀イドゥ |
ユニファイド | |
ユ́ニファ̀イド | |
[形容詞] | |
一つにした | |
統合された | |
とうごうされた | |
統一された | |
・ | |
analytics | |
æ̀nəlítiks | |
アェナゥリィデクス | |
アェ̀ナゥリィ́デクス | |
アナリティクス | |
ア̀ナリ́ティクス | |
[名詞] | |
分析論 | |
分析性 | |
分析学 | |
解析 | |
かいせき | |
kaiseki | |
更新日:2023年11月28日 |
同義語・類義語 | 関連語・その他 |
---|---|
ビッグデータ解析 | Apache Spark |
Data Mart | Big data |
data mart | big data |
アナリティクス1.0 | Data Lake |
アナリティクス2.0 | data lake |
アナリティクス3.0 | Hadoop |
エンタープライズ・データハブ | Microsoft SQLserver |
エンタープライズ・データレイク | Oracle Oracle10g |
データマート | データレイク |
ビッグデータ活用 | データ解析 |
ビッグデータ分析 | データ分析 |
large-scale data processing | ビッグ・デイダ |
lɑ́rdʒ skeil déitə | ビッグデータ |
ラゥージ スケイルゥ デイダァー プロセシィング | ビッグデータの湖 |
ラゥージ・スケイルゥ・デイダァー・プロセシィング | 非構造化データ |
ラージスケール データ プロセシング | 膨大なデータ |
ラージスケール・データ・プロセシング | 膨大なデジタル情報 |
巨大デジタル情報 | |
大規模データ処理 | |
更新日:2022年 5月16日 |