Топ 100 вопросов про Avro

Коллекция из 100 самых популярных вопросов про avro с ответами и комментариями.
1Как передать параметры для конкретного реестра схемы при использовании Kafka Avro Console Consumer?
2Реестр схем Kafka несовместим в той же теме
3Зачем использовать Avro с Kafka - как обрабатывать POJO
4Как использовать пакет spark-avro для чтения файла avro из spark-shell?
5Как создать объект, содержащий массив строк в схеме avro?
6Схема Avro - что такое "avro.java.string": "Строка"
7Не удалось импортировать схему avro с помощью python3.6.4
8Apache Beam Coder для GenericRecord
9PySpark: десериализация сериализованного сообщения Avro, содержащегося в avro-файле захвата событий
10Воспроизведение захвата Azure Eventhub
11Как использовать Spring-Kafka для чтения сообщения AVRO с реестром Confluent Schema?
12Org.apache.avro.AvroTypeException: Неизвестная ветвь объединения
13Выберите столбцы из сильно вложенных данных
14Pyspark 2.4.0, чтение avro из kafka с потоком чтения - Python
15Kafka Streams - SerializationException: неизвестный магический байт
16Несколько типов сообщений в одной теме Kafka с Avro
17Java.io.IOException Не файл данных после преобразования JSON в Avro с помощью Avro Tools
18Поле Avro ENUM
19Как мне проверить JSON на схему Avro
20Существует ли API-реализация логического типа Avro "продолжительность"?
21Эволюция схемы Avro вызывает исключение EOFException при десериализации
22Spring-Kafka не может преобразовать AVRO GenericData.Record в подтверждение
23Avro не может десериализовать сообщение с обновленной схемой
24Неизвестный магический байт с kafka-avro-console-consumer
25Используйте Avro в KafkaConnect без Confluent Schema Registry
26Как преобразовать Avro GenericRecord в действительный Json, используя при покрытии полей временной метки от миллисекунд до datetime?
27Как создать действительный пример JSON из схемы Avro?
28Avro logicType 'date' с нулевым значением по умолчанию
29Получение ошибки десериализации схемы: недопустимое значение по умолчанию для поля
30ClassCastException для десериализации того же класса из потока kafka и Avro
31Как сохранить фрейм данных искры в паркет без использования формата INT96 для столбцов меток времени?
32BigQuery игнорирует флаг --use_avro_logical_types при загрузке данных в формате AVRO
33Kafka Connect: как я могу использовать AvroConverter без реестра схем?
34Одна или несколько схем на тему при использовании реестра схем с Kafka и Avro...?
35Коннектор приемника Kafka не работает: схема не найдена; код ошибки: 40403
36Два класса в моем java-приложении имеют одно и то же квалифицированное имя
37Spark: производительность Avro vs Parquet
38Org.apache.avro.SchemaParseException: "перечисление" не является определенным именем
39Есть ли лучший способ получить список записей Avro из InputStream?
40Как можно выполнять функциональные тесты для потоков Kafka с помощью Avro (schemaRegistry)?
41Avro: неизвестный тип данных org.joda.time.DateTime для поля отметки времени, допускающего значение NULL
42Java.lang.ArrayIndexOutOfBoundsException: -40
43Формат avro, поиск позиции или пропуск строк через python
44Java.lang.NoSuchMethodException для метода инициализации в классе случаев Scala
45Создать схему avro из фрейма данных - spark - scala
46Как в Avro IDL импортировать схему, предоставленную извне?
47Получение исключения каста класса Kafka Streams в том же классе при применении функции карты
48Прочитайте таблицу Big Query со схемой Avro, используя луч, python
49Как установить массив записей с помощью GenericRecordBuilder
50Как читать данные из файла AVRO с помощью интерфейса C++?
51NPE при десериализации сообщений avro в потоках kafka
52Разделите схемы Apache Avro на несколько файлов, имея несколько целей в avro-maven-plugin
53Avro vs Parquet в облачном хранилище Google с использованием преобразования Google Dataflow
54Как использовать Camel-Avro-Consumer & Producer?
55Десериализовать сообщения Kafka AVRO с помощью Apache Beam
56Совместимость Spring Kafka, Spring Cloud Stream и Avro Неизвестный магический байт
57Schema-Registry отклоняет неизмененную схему как несовместимую
58Avro и Kafka с помощью SchemaBuilder
59Можно ли определить схему для тем Google Pub / Sub, как в Kafka, с помощью AVRO?
60CSV в AVRO с использованием Python
61Получить схему avro из сериализованного байтового массива
62Разрешение enum быть нулевым в схеме Avro
63Импорт географических данных в BigQuery с помощью Avro / Parquet
64Python - десериализовать десятичный логический тип байта avro в десятичный
65Отправка файла avro в Kafka
66Apache AVRO с загрузкой Spring
67AVRO - Комплексные записи с поддержкой типа Union Record
68Kafka Stream с использованием SpecificAvroSerde в Java Не удалось найти ошибку класса
69Kafka Stream с Avro в JAVA, schema.registry.url ", у которого нет значения по умолчанию
70Значения по умолчанию для вложенных записей в схеме Avro
71Ошибка чтения файла Avro в Python
72Как создать файл ".avsc" из входного файла avro?
73Искра структурированная потоковая передача avro в avro и пользовательский Sink
74Avro C# создает классы, используя типы, определенные в нескольких файлах схемы
75Проблема потребителя Spring boot kafka с десериализацией AVRO GENERIC_RECORD с использованием реестра схемы Glue
76Тип данных Avro uint64
77Внешняя таблица Hive в файле AVRO, создающая только данные NULL для всех столбцов
78TypeError: объект типа «mappingproxy» не сериализуем JSON
79Десериализатор сообщений kafka Avro для нескольких тем
80Плюсы и минусы Avro - JSON/бинарная сериализация
81Как читать бинарные avro fileData с исходником в акке?
82Не удалось инициализировать класс io.confluent.kafka.schemaregistry.client.rest.RestService
83Как мы можем настроить value.subject.name.strategy для схем в производителях Spring Cloud Stream Kafka, потребителях и KStreams?
84Как передать сообщения Kafka в приемник HDFS при достижении определенного размера (128 МБ)
85Как игнорировать некоторые виды сообщений в приложении Kafka Streams, которое читает и записывает разные типы событий из одной темы
86Как получить доступ к серверу реестра со слитной схемой, защищенному паролем, с помощью облачного потока Spring?
87Опросить несколько сообщений от Кафки
88Настройте размер файла Avro, записываемого в HDFS с помощью Spark
89Потребитель Java Kafka и десериализация avro
90Ошибка реализации реестра схемы с помощью kafka
91Ошибка Kafka Connect при запуске с AvroConverter
92Apache Kafka JDBC Connector - SerializationException: неизвестный магический байт
93Обработка вложенных схем AVRO с помощью Python3
94Java.lang.NoSuchMethodError: org.apache.avro.Schema.getLogicalType()Lorg/apache/avro/LogicalType; Структурированная потоковая передача с данными Avro
95Не удается разобрать схему AVRO в Golang
96Как установить логический тип в схеме spark-avro 2.4?
97Как создать/обновить схему Avro на основе заголовка CSV
98Импорт данных, поскольку Avro не работает со Sqoop 1.4.7 и Hadoop 2.7.3
99Как десериализовать файлы avro
100Можно ли преобразовать общую запись в конкретную запись с той же схемой?