Perguntas com a tag [pyspark]

votos
76
respostas
19
visitas
87k
importação pyspark em shell python
Publicado 23/04/2014 em 21:40
usuário Glenn Strycker
votos
97
respostas
15
visitas
57k
Como desativar INFO login faísca?
Publicado 07/08/2014 em 21:48
usuário horatio1701d
votos
20
respostas
2
visitas
25k
Converte uma string uma linha simples de RDD em faísca
Publicado 02/10/2014 em 08:07
usuário poiuytrez
votos
0
respostas
2
visitas
2k
Como agregar dados em Apache faísca
Publicado 18/10/2014 em 18:42
usuário kalyan padhiloju
votos
0
respostas
1
visitas
1k
PySpark textblob de NLTK usado em mapa MissingCorpusError
Publicado 24/10/2014 em 14:31
usuário ziky90
votos
9
respostas
2
visitas
22k
Qual é a diferença entre a faísca a apresentar e pyspark?
Publicado 04/11/2014 em 00:30
usuário user592419
votos
13
respostas
4
visitas
26k
Como encontrar o valor máximo em par RDD?
Publicado 12/11/2014 em 09:49
usuário Vijay Innamuri
votos
3
respostas
1
visitas
2k
como dividir os dados RDD em dois em faísca?
Publicado 15/11/2014 em 05:46
usuário user3077020
votos
6
respostas
1
visitas
8k
variáveis ​​de transmissão PySpark de funções locais
Publicado 16/11/2014 em 14:27
usuário Magsol
votos
36
respostas
9
visitas
67k
Reduzir um par de valor-chave em um par de chaves-list com Apache faísca
Publicado 18/11/2014 em 17:15
usuário TravisJ
votos
13
respostas
1
visitas
2k
Como utilizar plenamente todos os nós faísca em cluster?
Publicado 17/12/2014 em 15:53
usuário Michael David Watson
votos
5
respostas
2
visitas
4k
Faísca Python Performance Tuning
Publicado 03/01/2015 em 14:48
usuário B.Mr.W.
votos
2
respostas
1
visitas
1k
arquivos gzip com faísca
Publicado 04/01/2015 em 14:53
usuário Marigold
votos
0
respostas
1
visitas
453
Retornar dados de mesma linha que uma determinada consulta em Pyspark
Publicado 11/01/2015 em 02:16
usuário astroball
votos
1
respostas
3
visitas
10k
Faísca - teste de contagem do Word
Publicado 16/01/2015 em 00:57
usuário Vinicius
votos
6
respostas
2
visitas
20k
PySpark distinct (). Count () em um arquivo CSV
Publicado 16/01/2015 em 13:28
usuário dimzak
votos
13
respostas
4
visitas
12k
Como excluir uma RDD em PySpark para a finalidade de libertação de recursos?
Publicado 16/01/2015 em 16:39
usuário Ego
votos
4
respostas
1
visitas
1k
Como chegar SparkContext de JavaSparkContext em PySpark?
Publicado 22/01/2015 em 00:35
usuário Uri Laserson
votos
1
respostas
1
visitas
1k
MetaException (message: java.lang.IllegalArgumentException: java.net.UnknownHostException) durante a execução de consulta SQL em pyspark
Publicado 23/01/2015 em 13:42
usuário Kousik Kumar Gopalan
votos
6
respostas
4
visitas
3k
O uso de variáveis ​​locais em fechamentos ao acessar RDDS de ignição
Publicado 28/01/2015 em 20:57
usuário siggi_42
votos
1
respostas
1
visitas
1k
Faísca: Como enviar argumentos para faísca função foreach
Publicado 28/01/2015 em 21:38
usuário mvm
votos
8
respostas
4
visitas
3k
PySpark processamento distribuído num cluster FIO
Publicado 30/01/2015 em 03:06
usuário aaa90210
votos
0
respostas
3
visitas
8k
erro PySpark: "caminho de entrada não existe"
Publicado 01/02/2015 em 03:37
usuário Alexis Eggermont
votos
0
respostas
3
visitas
1k
instalar questão Spark. Não é possível abrir IPython Notebook com pyspark
Publicado 01/02/2015 em 15:06
usuário Matt
votos
2
respostas
1
visitas
766
SPARK-Scala HBase criação de tabelas falhar (MetaException (mensagem: file: / user / colméia / armazém / src não é um diretório ou incapaz de criar um)
Publicado 02/02/2015 em 16:42
usuário Renien
votos
1
respostas
3
visitas
3k
Como construir faísca 1.2 com Maven (dá java.io.IOException: Não é possível executar o programa "javac")?
Publicado 09/02/2015 em 00:24
usuário Alexis Eggermont
votos
3
respostas
2
visitas
4k
Importando pyspark para aplicação standalone
Publicado 09/02/2015 em 09:29
usuário WannaBeCoder
votos
-1
respostas
1
visitas
477
Instalando faísca depois de construir-lo em Maven
Publicado 09/02/2015 em 23:24
usuário Alexis Eggermont
votos
6
respostas
1
visitas
2k
Salvar Apache modelo faísca mllib em python
Publicado 10/02/2015 em 07:11
usuário poiuytrez
votos
1
respostas
1
visitas
413
Achatar uma tupla de comprimento desconhecido
Publicado 18/02/2015 em 20:18
usuário Michal
votos
6
respostas
1
visitas
5k
Trabalho da faísca falha ao chamar primeiro () em PySpark
Publicado 19/02/2015 em 07:10
usuário Jason Strimpel
votos
5
respostas
1
visitas
509
Resultados inconsistentes usando ALS em Apache faísca
Publicado 19/02/2015 em 09:33
usuário Ricky Vesel
votos
0
respostas
1
visitas
388
Usando Pyspark, ipython na AWS, como suprimir fluxo de saída constante?
Publicado 19/02/2015 em 22:01
usuário Logister
votos
2
respostas
3
visitas
5k
PySpark: Como ler muitos arquivos JSON, vários registos por arquivo
Publicado 23/02/2015 em 21:55
usuário cmwild
votos
1
respostas
1
visitas
1k
(Py) Faísca - Grupo pelo utilizador através de uma janela de tempo
Publicado 24/02/2015 em 20:55
usuário zbinsd
votos
2
respostas
1
visitas
584
Apache faísca ao vivo não está lendo o Diretório
Publicado 25/02/2015 em 17:40
usuário Saulo Ricci
votos
7
respostas
1
visitas
3k
usando pyspark, leitura / gravação de imagens 2D em sistema de arquivos Hadoop
Publicado 25/02/2015 em 20:46
usuário MathiasOrtner
votos
7
respostas
2
visitas
6k
Emitem vários pares em operação mapa
Publicado 27/02/2015 em 05:01
usuário Jeffrey Marshall
votos
17
respostas
5
visitas
7k
ficando número de nós visíveis na PySpark
Publicado 27/02/2015 em 13:30
usuário Bryan
votos
5
respostas
1
visitas
964
Como chegar WebUI URI de SparkContext
Publicado 27/02/2015 em 18:06
usuário Charles Hayden
votos
0
respostas
1
visitas
425
de pyspark.streaming importação StreamingContext ImportError: No módulo chamado de streaming
Publicado 28/02/2015 em 11:56
usuário Prasanna
votos
49
respostas
13
visitas
118k
Carregar o arquivo CSV com faísca
Publicado 28/02/2015 em 12:41
usuário Kernael
votos
9
respostas
4
visitas
5k
PySpark & ​​MLLib: Probabilidades classe de Previsões aleatória Floresta
Publicado 02/03/2015 em 18:15
usuário Bryan
votos
27
respostas
3
visitas
14k
Como definir valores de configuração do Hadoop de pyspark
Publicado 03/03/2015 em 22:29
usuário javadba
votos
6
respostas
0
visitas
493
"As tarefas começaram ainda" para uma Job faísca contendo repartição ()
Publicado 07/03/2015 em 20:44
usuário javadba
votos
-1
respostas
2
visitas
1k
HDFS / Hadoop acesso à API do trabalhador pyspark
Publicado 09/03/2015 em 17:10
usuário javadba
votos
10
respostas
5
visitas
8k
PySpark & ​​MLLib: Importâncias recurso Floresta aleatória
Publicado 10/03/2015 em 17:01
usuário Bryan
votos
2
respostas
0
visitas
2k
Pyspark diz "Row' objeto não tem nenhum atributo '_get_object_id' on partitionBy ()
Publicado 11/03/2015 em 01:17
usuário javadba
votos
2
respostas
0
visitas
494
PySpark: de hash () ResultIterable difere antes e depois da recolha ()
Publicado 11/03/2015 em 11:57
usuário Magsol
votos
2
respostas
2
visitas
2k
Erro no --pyspark instalação faísca
Publicado 11/03/2015 em 12:08
usuário user2871856
votos
1
respostas
2
visitas
8k
PySpark: filtrando elementos RDD falha no objeto 'NoneType' não é iterable
Publicado 11/03/2015 em 18:21
usuário Ajar




votos
3
respostas
3
visitas
10k
Como acessar SparkContext no roteiro pyspark
Publicado 11/03/2015 em 21:29
usuário javadba
votos
39
respostas
3
visitas
51k
Como converter uma trama de dados de volta para RDD normal em pyspark?
Publicado 11/03/2015 em 23:36
usuário javadba
votos
6
respostas
1
visitas
8k
Mostrar partições em um RDD pyspark
Publicado 14/03/2015 em 22:58
usuário javadba
votos
1
respostas
2
visitas
3k
Definir número de núcleos usados ​​no roteiro PySpark?
Publicado 16/03/2015 em 15:15
usuário Ego
votos
40
respostas
4
visitas
68k
Actualizar uma coluna de trama de dados em centelha
Publicado 17/03/2015 em 19:19
usuário Luke
votos
5
respostas
2
visitas
1k
Por que Apache PySpark superior () falhar quando o RDD contém uma classe definida pelo usuário?
Publicado 18/03/2015 em 17:18
usuário user3279453
votos
1
respostas
2
visitas
3k
pyspark saída método dobra
Publicado 19/03/2015 em 14:38
usuário keegan
votos
6
respostas
2
visitas
707
faísca escalabilidade: o que estou fazendo de errado?
Publicado 19/03/2015 em 20:37
usuário sds
votos
1
respostas
1
visitas
750
erro picles no filtro de faísca
Publicado 20/03/2015 em 18:16
usuário sds
votos
2
respostas
1
visitas
469
Salvando modelo de regressão em pySpark
Publicado 22/03/2015 em 01:55
usuário Charles Hayden
votos
4
respostas
1
visitas
2k
Como armazenar em cache e persistem as tabelas temporárias no SQL faísca?
Publicado 23/03/2015 em 10:59
usuário Ola Gustafsson
votos
2
respostas
2
visitas
5k
São funções de janela (por exemplo, primeiro, último, lag, chumbo) apoiados por pyspark?
Publicado 23/03/2015 em 19:26
usuário Jie Chen
votos
2
respostas
1
visitas
604
Primeiros B não pode ser convertido para java.lang.String ao usar faísca SQL
Publicado 24/03/2015 em 02:18
usuário javadba
votos
29
respostas
2
visitas
28k
Qual é o método de ignição trama de dados `toPandas` realmente fazendo?
Publicado 24/03/2015 em 04:22
usuário Napitupulu Jon
votos
1
respostas
1
visitas
196
pyspark GetAttr () comportamento
Publicado 24/03/2015 em 17:29
usuário keegan
votos
11
respostas
4
visitas
9k
O que é o caminho certo para salvar \ modelos de carga em faísca \ PySpark
Publicado 25/03/2015 em 10:03
usuário artemdevel
votos
0
respostas
1
visitas
1k
Como escrever a uma tabela SQL faísca de um quadro de dados Panda usando PySpark?
Publicado 25/03/2015 em 16:02
usuário matthieu lieber
votos
4
respostas
1
visitas
2k
Como descobrir a quantidade de pyspark memória tem a partir da interface ipython?
Publicado 26/03/2015 em 21:14
usuário user1521607
votos
1
respostas
1
visitas
244
Como zip após distnct em pySpark
Publicado 30/03/2015 em 20:36
usuário Charles Hayden
votos
7
respostas
2
visitas
15k
Como grupo, várias chaves na ignição?
Publicado 31/03/2015 em 14:44
usuário Rahul
votos
1
respostas
1
visitas
1k
Faz sentido que tome ignição 4 segundos para contar linhas 13 milhões?
Publicado 02/04/2015 em 21:24
usuário Imri
votos
1
respostas
1
visitas
2k
pyspark: dependência frasco navio com faísca a apresentar
Publicado 03/04/2015 em 12:47
usuário StefanoP
votos
19
respostas
5
visitas
18k
Localmente leitura de arquivos S3 através de faísca (ou melhor: pyspark)
Publicado 04/04/2015 em 06:33
usuário EOL
votos
1
respostas
1
visitas
1k
Como executar um trabalho PySpark (com módulos personalizados) na Amazon EMR?
Publicado 04/04/2015 em 13:23
usuário EOL
votos
5
respostas
4
visitas
4k
No módulo chamado numpy quando faísca a apresentar
Publicado 04/04/2015 em 16:18
usuário JnBrymn
votos
0
respostas
1
visitas
240
não PySpark não tem método getVectors acessível para Word2VecModel
Publicado 06/04/2015 em 09:47
usuário Abhishek Choudhary
votos
2
respostas
1
visitas
1k
Especificar opções para a JVM lançado pela pyspark
Publicado 06/04/2015 em 18:23
usuário javadba
votos
6
respostas
1
visitas
6k
Funções de pacotes Python para UDF () da trama de dados de faísca
Publicado 06/04/2015 em 20:18
usuário Jie Chen
votos
3
respostas
1
visitas
809
Problemas com a instalação Java (fazendo uso faísca difícil)
Publicado 06/04/2015 em 21:20
usuário Craig
votos
9
respostas
4
visitas
40k
Criação de uma trama de dados de faísca de uma RDD de listas
Publicado 07/04/2015 em 19:53
usuário mgoldwasser
votos
2
respostas
1
visitas
621
Apache Faísca: Exceção Timeout ao processar grande quantidade de dados a partir do S3
Publicado 09/04/2015 em 05:23
usuário Savinay Narendra
votos
0
respostas
0
visitas
704
Não é possível importar pyspark em shell python
Publicado 09/04/2015 em 10:41
usuário Mrunmayee
votos
1
respostas
2
visitas
1k
Faísca: processamento de dados usando faísca para grande número de arquivos diz SocketException: Leia expirou
Publicado 09/04/2015 em 12:24
usuário rai
votos
1
respostas
0
visitas
684
Faísca aplicar a função de um grupo
Publicado 10/04/2015 em 13:42
usuário B.Mr.W.
votos
43
respostas
4
visitas
53k
Faísca de Kills Correndo Aplicação
Publicado 10/04/2015 em 14:51
usuário B.Mr.W.
votos
2
respostas
0
visitas
851
métodos de cache não funciona no faísca 1.3.0
Publicado 10/04/2015 em 15:04
usuário DAE
votos
0
respostas
1
visitas
2k
Combine Row () 's na ignição
Publicado 10/04/2015 em 16:59
usuário DAE
votos
2
respostas
2
visitas
1k
Valores FlatMap e sua coluna de índice
Publicado 10/04/2015 em 17:02
usuário theMadKing
votos
2
respostas
1
visitas
990
Leia streaming de dados de s3 usando pyspark
Publicado 10/04/2015 em 19:18
usuário anonuser0428
votos
0
respostas
1
visitas
1k
Configuração Hadoop personalizado para faísca de Python (PySpark)?
Publicado 10/04/2015 em 21:30
usuário Roman Nikitchenko
votos
25
respostas
8
visitas
40k
Como excluir colunas na trama de dados pyspark
Publicado 13/04/2015 em 07:10
usuário xjx0524
votos
1
respostas
1
visitas
1k
Usando python multiprocessamento com faísca e Kafka
Publicado 13/04/2015 em 10:05
usuário mandok
votos
3
respostas
3
visitas
6k
Posso converter pandas trama de dados para desencadear RDD?
Publicado 14/04/2015 em 18:25
usuário Ram Narayanan
votos
7
respostas
2
visitas
3k
Não é capaz de se conectar ao postgres usando jdbc no escudo pyspark
Publicado 16/04/2015 em 07:34
usuário Soni Shashank
votos
3
respostas
1
visitas
498
Faísca MLlib embalagens Peso NaN
Publicado 16/04/2015 em 16:48
usuário help_needed
votos
1
respostas
1
visitas
500
Por que a faísca pedindo um método main quando eu enviar um arquivo python?
Publicado 18/04/2015 em 04:26
usuário BitPusher16
votos
0
respostas
1
visitas
627
Pyspark reduceByKey está concatenando vs adicionando
Publicado 18/04/2015 em 10:21
usuário theMadKing
votos
37
respostas
6
visitas
31k
PySpark groupByKey retornando pyspark.resultiterable.ResultIterable
Publicado 18/04/2015 em 11:18
usuário theMadKing
votos
0
respostas
2
visitas
4k
função pySpark forEach em uma chave
Publicado 18/04/2015 em 12:58
usuário theMadKing
votos
2
respostas
2
visitas
1k
pyspark --- randomForests especificar variáveis ​​categóricas usando "categoricalFeaturesInfo"
Publicado 18/04/2015 em 13:56
usuário Kuan Chen CK




votos
3
respostas
1
visitas
2k
PySpark partitionBy, repartição, ou nada?
Publicado 19/04/2015 em 14:01
usuário theMadKing
votos
4
respostas
1
visitas
2k
enviar roteiro .py em faísca sem instalação Hadoop
Publicado 20/04/2015 em 10:18
usuário Alexis Eggermont
votos
3
respostas
3
visitas
2k
PySpark Transmissão Variável Junte
Publicado 20/04/2015 em 16:32
usuário theMadKing
votos
7
respostas
2
visitas
10k
Como ler um arquivo de Avro em PySpark
Publicado 20/04/2015 em 21:57
usuário B.Mr.W.
votos
7
respostas
1
visitas
4k
Criar trama de dados de faísca do dicionário aninhado
Publicado 21/04/2015 em 10:14
usuário Marigold
votos
6
respostas
2
visitas
9k
Juntando-se dois DataFrames da mesma fonte
Publicado 21/04/2015 em 14:25
usuário karlson
votos
1
respostas
1
visitas
863
dividir a chave em um arquivo de texto mapreduced em pyspark
Publicado 21/04/2015 em 16:40
usuário sumit
votos
5
respostas
1
visitas
1k
Como Python interagir com JVM dentro faísca
Publicado 22/04/2015 em 04:15
usuário B.Mr.W.
votos
8
respostas
3
visitas
8k
Como carregar mais eficientemente arquivos Parquet em faísca (pySpark v1.2.0)
Publicado 22/04/2015 em 15:33
usuário jarfa
votos
14
respostas
1
visitas
1k
Faísca MLlib - aviso trainImplicit
Publicado 22/04/2015 em 16:27
usuário Tarantula
votos
1
respostas
1
visitas
2k
Salve trama de dados como Parquet não funciona no Pyspark
Publicado 22/04/2015 em 21:49
usuário Plastic Soul
votos
4
respostas
3
visitas
13k
PySpark reduceByKey? para adicionar Key / Tuple
Publicado 23/04/2015 em 19:21
usuário theMadKing
votos
2
respostas
2
visitas
4k
pyspark como carregar arquivo mal-humorado comprimido
Publicado 25/04/2015 em 20:59
usuário Levi Pierce
votos
0
respostas
2
visitas
1k
Faísca - WARN LoadSnappy: biblioteca nativa Snappy não carregado
Publicado 26/04/2015 em 20:32
usuário trek
votos
0
respostas
1
visitas
250
Manipulação de itens incorretos em função de mapa em faísca
Publicado 27/04/2015 em 08:44
usuário Alexis Eggermont
votos
0
respostas
1
visitas
1k
pySpark .reduceByKey (min) / comportamento estranho max
Publicado 27/04/2015 em 15:32
usuário theMadKing
votos
9
respostas
3
visitas
20k
Salvar uma grande trama de dados de faísca como um único arquivo json no S3
Publicado 28/04/2015 em 00:46
usuário jegordon
votos
0
respostas
2
visitas
1k
Adicionar campo de data para RDD em faísca
Publicado 28/04/2015 em 01:23
usuário Alexis Eggermont
votos
6
respostas
3
visitas
4k
Pyspark py4j PickleException: "esperado de zero argumentos para construção de ClassDict"
Publicado 28/04/2015 em 04:04
usuário javadba
votos
1
respostas
1
visitas
788
Faísca reduceByKey em vários valores diferentes
Publicado 28/04/2015 em 06:42
usuário Alexis Eggermont
votos
2
respostas
1
visitas
1k
pySpark encontrar Median de forma distribuída?
Publicado 28/04/2015 em 12:51
usuário theMadKing
votos
0
respostas
1
visitas
139
Faísca de streaming processa RDDS um por um?
Publicado 29/04/2015 em 03:30
usuário takaomag
votos
12
respostas
8
visitas
45k
Obter CSV em Spark trama de dados
Publicado 29/04/2015 em 05:43
usuário Alexis Eggermont
votos
0
respostas
1
visitas
1k
Apache faísca: Master removido nossa aplicação: Falha ao usar saveAsTextFile em grande RDD
Publicado 30/04/2015 em 06:12
usuário Daniel Weiss
votos
2
respostas
2
visitas
910
Primeiro código em faísca (python)
Publicado 30/04/2015 em 16:41
usuário Walkon
votos
29
respostas
7
visitas
23k
renomeando colunas para dataframes pyspark agregados
Publicado 01/05/2015 em 13:01
usuário cantdutchthis
votos
0
respostas
1
visitas
153
pyspark utiliza apenas metade da memória ec2-faísca
Publicado 01/05/2015 em 17:18
usuário cantdutchthis
votos
7
respostas
2
visitas
13k
pySpark Criar trama de dados a partir RDD com a Chave / Valor
Publicado 02/05/2015 em 19:36
usuário theMadKing
votos
9
respostas
2
visitas
11k
Apache faísca, desencadear a apresentar, o que é o comportamento da opção-executor núcleos --total
Publicado 04/05/2015 em 12:19
usuário MathiasOrtner
votos
2
respostas
2
visitas
3k
Erro: É necessário especificar um recurso primário (JAR ou arquivo Python) - faísca enviar Python aplicativo
Publicado 04/05/2015 em 15:55
usuário Denis
votos
2
respostas
1
visitas
2k
combinando linhas / colunas de quadros de dados faísca por operação matemática
Publicado 04/05/2015 em 19:26
usuário tammo
votos
0
respostas
1
visitas
1k
Usando rotinas MLLib de ignição com pandas dataframes
Publicado 05/05/2015 em 23:52
usuário firdaus
votos
0
respostas
1
visitas
5k
Impossível comparar datas em consulta faísca SQL
Publicado 06/05/2015 em 11:34
usuário michal.dul
votos
2
respostas
0
visitas
370
PySpark teste automático utilizando nosetests
Publicado 06/05/2015 em 13:39
usuário Teodor-Bogdan Barbieru
votos
1
respostas
1
visitas
3k
pySpark Dados Frames "afirmar isinstance (dataType, DataType), "dataType deve ser DataType"
Publicado 07/05/2015 em 14:18
usuário theMadKing
votos
0
respostas
2
visitas
2k
pySpark DataFrames .groupBy () inserir uma sequência de valores
Publicado 07/05/2015 em 18:16
usuário theMadKing
votos
4
respostas
1
visitas
3k
Faça dicionário Python disponível para todas as partições de ignição
Publicado 08/05/2015 em 12:53
usuário anonuser0428
votos
0
respostas
2
visitas
931
Muito poucos executores estão em execução no cluster
Publicado 08/05/2015 em 17:48
usuário user1525721
votos
0
respostas
1
visitas
330
reduceByKey () não DICT funcionando como esperado
Publicado 08/05/2015 em 18:24
usuário anonuser0428
votos
0
respostas
1
visitas
1k
produto de ponto de uma combinação de elementos de um RDD usando pySpark
Publicado 09/05/2015 em 06:04
usuário anonuser0428
votos
0
respostas
1
visitas
848
Problemas Registrando Função Com faísca-SQL usando PySpark
Publicado 10/05/2015 em 17:32
usuário hamel
votos
1
respostas
1
visitas
522
Como implantar e executar em um scripts específicos Python tempo em Apache faísca?
Publicado 11/05/2015 em 09:13
usuário Denis
votos
1
respostas
1
visitas
716
pySpark trama de dados FloatType () com o arquivo entrando como unicode
Publicado 11/05/2015 em 18:03
usuário theMadKing
votos
9
respostas
1
visitas
12k
Sintaxe durante a definição esquema para Pyspark.sql usando StructType
Publicado 13/05/2015 em 11:09
usuário Jason
votos
11
respostas
2
visitas
7k
Como executar várias tarefas em um Sparkcontext de segmentos separados em PySpark?
Publicado 13/05/2015 em 11:14
usuário Meethu Mathew
votos
1
respostas
1
visitas
1k
Faísca Kafka WordCount Python
Publicado 13/05/2015 em 23:44
usuário Colman
votos
24
respostas
7
visitas
39k
Removendo duplicatas de linhas com base em colunas específicas em uma / trama de dados de faísca RDD
Publicado 14/05/2015 em 21:03
usuário Jason
votos
3
respostas
2
visitas
4k
Por que dropna () não funciona?
Publicado 15/05/2015 em 06:07
usuário Jason
votos
2
respostas
2
visitas
806
complicado participar faísca: Elementos RDD tem muitos pares de valor-chave
Publicado 15/05/2015 em 11:51
usuário cnrk
votos
22
respostas
6
visitas
11k
Remodelando / dados giratórias em RDD de ignição e / ou faísca DataFrames
Publicado 15/05/2015 em 11:51
usuário Jason




votos
15
respostas
6
visitas
27k
Calculando duração subtraindo duas colunas de data e hora no formato de cadeia
Publicado 17/05/2015 em 03:36
usuário Jason
votos
0
respostas
1
visitas
343
Pyspark - redutor itera tarefa mais valores
Publicado 17/05/2015 em 07:36
usuário dadibiton
votos
0
respostas
1
visitas
857
Como mesclar elemento-wise dois RDDS
Publicado 18/05/2015 em 06:45
usuário MINHAZUL ISLAM Sk
votos
2
respostas
1
visitas
765
Como usar o ID de usuário muito tempo em PySpark ALS
Publicado 18/05/2015 em 23:30
usuário Jon
votos
1
respostas
1
visitas
1k
Erros parquet em PySpark usando HDC 5.4 e 1.3.0 da faísca com parquet Tabela na colmeia
Publicado 19/05/2015 em 09:35
usuário DAE
votos
0
respostas
1
visitas
735
PySpark Job jogando IOError
Publicado 19/05/2015 em 13:11
usuário anonuser0428
votos
5
respostas
1
visitas
1k
Funções pySpark DataFrames Agregação com SciPy
Publicado 19/05/2015 em 17:46
usuário theMadKing
votos
1
respostas
3
visitas
1k
Obter todas as combinações possíveis de valores por chave em uma RDD em pyspark
Publicado 20/05/2015 em 00:58
usuário anonuser0428
votos
5
respostas
3
visitas
6k
Execute SQL faísca em CHD5.4.1 NoClassDefFoundError
Publicado 20/05/2015 em 07:13
usuário Ha Pham
votos
5
respostas
1
visitas
7k
pyspark em ipython notebook levanta Py4JNetworkError
Publicado 20/05/2015 em 12:16
usuário Ezer K
votos
2
respostas
0
visitas
2k
Como escrever diretamente para o arquivo HDFS em vez de usar saveAsTextFile em faísca python?
Publicado 21/05/2015 em 04:47
usuário kuixiong
votos
2
respostas
1
visitas
959
Devo usar registerDataFrameAsTable no SQL faísca?
Publicado 21/05/2015 em 16:42
usuário michal.dul
votos
2
respostas
1
visitas
668
Faísca Avaliação SQL JSON booleana
Publicado 21/05/2015 em 19:45
usuário theMadKing
votos
0
respostas
3
visitas
818
esquema faísca RDD para RDD
Publicado 23/05/2015 em 11:10
usuário sri hari kali charan Tummala
votos
0
respostas
1
visitas
220
Chamando .stats () no agrupados RDD (faísca)
Publicado 26/05/2015 em 13:22
usuário bcollins
votos
2
respostas
2
visitas
1k
Junte-se a dois (não) emparelhado RDDS fazer uma trama de dados
Publicado 26/05/2015 em 16:53
usuário Ehsan M. Kermani
votos
2
respostas
0
visitas
247
hadoop, quando executado no faísca, funde seu stderr para stdout
Publicado 26/05/2015 em 18:42
usuário sds
votos
0
respostas
1
visitas
1k
Como lista de valores passar, json pyspark
Publicado 27/05/2015 em 03:35
usuário Kumar
votos
8
respostas
1
visitas
2k
Python vs Scala (para trabalhos de ignição)
Publicado 27/05/2015 em 08:11
usuário gunererd
votos
3
respostas
2
visitas
778
Como eu mapear mais de uma RDD localmente?
Publicado 27/05/2015 em 15:28
usuário sds
votos
2
respostas
1
visitas
2k
Adicionar coluna Aggregate em Spark trama de dados
Publicado 28/05/2015 em 14:12
usuário calstad
votos
45
respostas
14
visitas
50k
Como faço para configurar versão python do motorista em faísca?
Publicado 28/05/2015 em 21:52
usuário Kevin
votos
1
respostas
0
visitas
1k
Faísca 1.3.1 Python ForeachRDD
Publicado 29/05/2015 em 05:36
usuário Colman
votos
3
respostas
1
visitas
1k
PySpark Transmissão exemplo parece não terminar
Publicado 31/05/2015 em 04:17
usuário Manoj
votos
25
respostas
11
visitas
29k
É possível obter as definições de contexto faísca atuais em PySpark?
Publicado 31/05/2015 em 16:15
usuário whisperstream
votos
0
respostas
1
visitas
217
PySpark Criar multi indexado Emparelhados RDD com a função
Publicado 03/06/2015 em 01:21
usuário archeezee
votos
2
respostas
2
visitas
5k
Juntando-se dois dataframes de ignição no tempo (TimestampType) em python
Publicado 03/06/2015 em 19:43
usuário Oleksiy
votos
1
respostas
1
visitas
206
São 'locais [n]' aplicações pyspark efectuadas pela GIL?
Publicado 04/06/2015 em 08:06
usuário Ophir Yoktan
votos
0
respostas
1
visitas
337
trama de dados ou sqlctx (SqlContext) gerado "Tentando chamar um pacote de" erro
Publicado 04/06/2015 em 13:56
usuário Tara
votos
2
respostas
0
visitas
613
erros faísca / PySpark no misterioso arquivo ausente / tmp
Publicado 04/06/2015 em 22:48
usuário JnBrymn
votos
2
respostas
2
visitas
6k
PySpark reparticionando elementos RDD
Publicado 05/06/2015 em 22:06
usuário Falcon Taylor-Carter
votos
7
respostas
2
visitas
1k
Como a faísca interoperar com CPython
Publicado 06/06/2015 em 15:18
usuário Arne Claassen
votos
1
respostas
3
visitas
1k
faísca reduzir e mapear questão
Publicado 07/06/2015 em 17:24
usuário BufBills
votos
0
respostas
1
visitas
42
Mais de empregos esperados em execução em faísca apache
Publicado 09/06/2015 em 11:26
usuário shivams
votos
3
respostas
1
visitas
357
Importando módulos de código que é executado nos trabalhadores
Publicado 09/06/2015 em 17:18
usuário Ophir Yoktan
votos
0
respostas
1
visitas
505
É possível executar faísca (especificamente pyspark) no processo?
Publicado 09/06/2015 em 17:22
usuário Ophir Yoktan
votos
10
respostas
11
visitas
39k
contexto faísca 'sc' não definido
Publicado 10/06/2015 em 17:03
usuário Arvind
votos
0
respostas
1
visitas
1k
OutOfMemoryError ao usar PySpark para ler arquivos em modo local
Publicado 10/06/2015 em 17:18
usuário santon
votos
9
respostas
1
visitas
3k
Posso mudar SparkContext.appName na mosca?
Publicado 10/06/2015 em 17:48
usuário sds
votos
3
respostas
1
visitas
82
Existe uma maneira de imitar ordem superior sintaxe abreviada função (binário) de R dentro de faísca ou pyspark?
Publicado 11/06/2015 em 14:18
usuário JasonAizkalns
votos
4
respostas
3
visitas
7k
Leia ORC arquivos diretamente do shell faísca
Publicado 11/06/2015 em 21:27
usuário mslick3
votos
0
respostas
3
visitas
1k
Acessando arquivo CSV colocado em hdfs usando faísca
Publicado 12/06/2015 em 08:37
usuário optimist
votos
1
respostas
7
visitas
4k
Como função lambda em função takeOrdered trabalha em pySpark?
Publicado 12/06/2015 em 14:07
usuário Sarit Adhikari
votos
1
respostas
1
visitas
729
um trabalho leva extremamente longa em várias esquerda participar faísca-SQL (1.3.1)
Publicado 12/06/2015 em 15:31
usuário dmytro
votos
0
respostas
1
visitas
236
Como usar faísca por mapa-reduzir o fluxo para selecionar N colunas, linhas superiores M de todos os arquivos CSV em uma pasta?
Publicado 12/06/2015 em 17:15
usuário Osiris
votos
19
respostas
1
visitas
23k
O que para definir `SPARK_HOME` para?
Publicado 13/06/2015 em 23:12
usuário A T
votos
3
respostas
0
visitas
768
Zeppelin: Construtor org.apache.spark.api.python.PythonRDD não existe
Publicado 14/06/2015 em 06:18
usuário A T
votos
1
respostas
1
visitas
4k
PySpark reduceByKey em vários valores
Publicado 14/06/2015 em 15:02
usuário KillerSnail
votos
2
respostas
3
visitas
482
É o retorno DStream por função updateStateByKey contém apenas um RDD?
Publicado 14/06/2015 em 22:14
usuário zwb
votos
2
respostas
1
visitas
71
Alteração da configuração em tempo de execução para o PySpark
Publicado 26/04/2020 em 10:00
usuário Jay Yip





Cookies help us deliver our services. By using our services, you agree to our use of cookies. Learn more