spark (1,126)


performance - Hadoopの経験ですか?

performance - Hadoopの経験ですか?

Hadoopを試してみたことがありますか? Share-nothingアーキテクチャで、それに伴う分散ファイルシステムなしでも使用できますか? それは理にかなっていますか? 私はあなたが持っているパフォーマンス結果にも興味があります...…


frameworks - MapReduceの簡単な説明は?

CouchDB質問に関連しています。 誰でも理解できる用語でMapReduceを説明できますか?…


MapReduce/Hadoopはどのように使用しますか?

他の人々がHadoopや他のMapReduceのようなテクノロジーをどのように使っているかについての一般的な情報を探しています。 一般に、既存のデータセット(Webサーバーのログファイルなど)を処理するMRアプリケーションを作成しているのか、新しいデータセットを生成して処理するアプリケーションを作成しているのか不思議です。 編集:フォローアップの質問(1)他のMRプログラムで生成されたデ…


XMPPとAndroid

可能な重複: AndroidとXMPP:現在利用可能なソリューション 私はAndroidで小さなXMPPクライアントを構築しようとしています。 どのような図書館のアイデアを私は使用できますか? 私はSmack APIを使用しようとしましたが、それにはいくつかの問題があり、実用的ではありません。…



JavaでDataSetクラス?

誰もが.NETにあるようにJavaにDataSetクラスがあるかどうか知っていますか? 私はEJB 3とデータを処理する「Javaの方法」に精通しています。 しかし、データベースクエリ、xml、およびDataSetクラスによって提供されるオブジェクトの間のシームレスな統合をまだ見逃しています。 DataSetのJava実装(DataTable、DataRowなどを含む)を見つけたことがある人は…


python - numpy/scipyを使って、欠けているデータをどのように処理しますか?

データクリーニングで私が最も対処していることの1つは、欠損値です。 Rは、 "NA"欠落データラベルを使用してこれをうまく処理します。 pythonでは、セットアップするのは大変なことで、よく文書化されていないような、マスクされた配列を扱う必要があるようです。 Pythonでこのプロセスを簡単にするための提案はありますか? これは、データ分析のためにPythonに移行する際の大きな問題にな…


Scalaで2つ以上のリストを一緒に圧縮することはできますか?

以下のScala Listが与えられます: val l=List(List("a1", "b1", "c1"), List("a2", "b2", "c2"), List("a3", "b3", "c3")) どうすれば入手することができますか: List(("a1", "a2", "a3"),("b1", "b2", "b3"),("c1", "c2", "c3")) zipは…


scala - スカラー識別関数はありますか?

List[Option[A]]ようなものをList[Option[A]]に変換したいのであれば、標準的な方法はflatMapを使うことflatMap:scala> val l=List(Some("Hello"), None, Some("World")) l: List[Option[java.lang.String]]=List(Some(Hello), None, Some(W…


aggregate - Elastic MapReduceで利用可能なリデューサー

私はこれが正しい方法で尋ねていることを願っています。 私はElastic MapReduceをめぐる道を学んでいますし、「ストリーミング」ジョブフローで使用できる「集約」リデューサーへの参照を数多く見ました。 Amazonの「Amazon Elastic MapReduceの紹介」PDFには、「Amazon Elastic MapReduceには集計というデフォルトのリデューサーがある」と書…


enterprise architect - Sparx Systemエンタープライズアーキテクトブック

SparxシステムのEnterprise Architectに関する書籍があるかどうかは誰にも分かりますか?(sparxサイトとリファレンスのほかに)…




apache dataframe pyspark scala sql 使い方 hadoop java python サンプル