apache / apache/pulsar-client-python

Use Protobuf as schema registry for python client

Aberta
#49 3 comentários 1 reação 0 responsáveis Ver no GitHub
Linguagem predominante
Python
Estrelas
75
Forks
53
Métricas de merge de PRs
Nenhum PR com merge em 30d

Descrição

**Is your enhancement request related to a problem? Please describe.**
I was wondering if there was a possibility to use protobuf in order to auto-generate code for my pulsar client services (both producer and consumer). By reading documentation and searching on the internet I was able to find some references related to other languages (like Java or C).

**Describe the solution you'd like**
I've tried to do something like that, obviously without success.
```
import _pulsar
from pulsar import Client
from pulsar.schema import Schema

from generated_schema.test_pb2 import TodoList

class ProtobufSchema(Schema):
def __init__(self, record_cls):
super(ProtobufSchema,
self).__init__(record_cls, _pulsar.SchemaType.PROTOBUF, ,
'PROTOBUF')

def encode(self, obj):
self._validate_object_type(obj)
return obj.SerializeToString()

def decode(self, data):
return self._record_cls.FromString(data)

def test():
client = Client('pulsar://localhost:6650')
producer = client.create_producer(topic='persistent://cloudacademy/accounts/sso-configuration-updated.v1',
schema=ProtobufSchema(TodoList))

producer.send(TodoList(owner_id=1, owner_name='test'))
```

**Additional context**
For a reference, I'm expecting something like the integration with Avro, but instead with Protobuf (with autogenerated classes)

Guia de contribuição

Abrir o guia de contribuição

Direção de pesquisa

Comece lendo a integração Avro existente e a documentação do schema referenciada na issue; em seguida, rastreie como Schema fornece o tipo de schema e o comportamento de serialização. O trabalho estará concluído quando as classes protobuf geradas puderem ser usadas tanto por producers quanto por consumers, e o registro do schema e a codificação/decodificação funcionarem de forma consistente.

Escrita pelo modelo de indexação a partir do texto da issue.

Avaliação

Stack de tecnologia
python
Domínio
backend, distributed-systems
Tipo de issue
Funcionalidade
Dificuldade
4/5
Tempo estimado
3-5 dias
Status de atividade
Estagnada
Clareza
Razoavelmente clara
Facilidade para iniciantes
35/100

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.