Preguntas con Tag: avro
Apache Avro es un marco de serialización de datos utilizado principalmente en Apache Hadoop.
Spark: los datos inusualmente lentos escriben a Cloud Storage
Como etapa final del trabajo de pyspark, necesito guardar 33Gb de datos a Cloud Storage.
Mi grupo está en Dataproc y consta de 15 trabajadores estándar-v4. Estoy trabajando con avro y el códi
apache-spark
pyspark
apache-spark-sql
google-cloud-storage
avro
3 años, 4 meses, 28 días
¿Cómo deserializar avro fecha del mensaje mqt?
Estoy recibiendo datos serializados (AVRO) como un mensaje mqtt. Mensaje Parece algo así. Objavro.codecnullavro.schemaº{"type": "record", "name": "User", "namespace":
python
mqtt
avro
3 años, 4 meses, 25 días
Python HTTP POST peticiones serializadas en AVRO
Estoy tratando de enviar datos con un script python a Apache NiFi a través de solicitudes HTTP. Puedo enviarlo en formato JSON sin problemas, pero estoy tratando de hacerlo serializado en AVRO.
Uno
python
http
httprequest
apache-nifi
avro
3 años, 4 meses, 29 días
Failing to AVRO serialise on only one consuming microservice
Tengo cinco Kafka consumiendo servicios y un servicio de producción de Kafka. Estoy después de lanzar un nuevo esquema avro en una biblioteca de consumidores en cada uno de los microservicios que c
apache-kafka
kafka-consumer-api
avro
confluent-platform
confluent-schema-registry
3 años, 4 meses, 29 días
ArrayIndexOutOfBoundsException while reading avro file using BinaryDecoder in java
Estoy usando avro-1.10.1 frasco y debajo es el código de muestra.
Esto es leer los datos de archivo avro almacenados en el sistema local. Excepción lanzada en lector. Lea el método donde está trata
binary
avro
3 años, 4 meses, 29 días
Cómo buscar el esquema de Azure eventhub usando Golang
Tengo esquema creado en el uniforme, y estoy usando el paquete "github.com/Azure/azure-event-hubs-go/v3" para recibir y enviar mensajes a eventhub usando Go.
¿Cómo puedo utilizar Schema para
go
avro
azure-eventhub
3 años, 4 meses, 29 días