apache / apache/pulsar-client-python
Use Protobuf as schema registry for python client
- Linguagem predominante
- Python
- Estrelas
- 75
- Forks
- 53
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Descrição
**Is your enhancement request related to a problem? Please describe.**
I was wondering if there was a possibility to use protobuf in order to auto-generate code for my pulsar client services (both producer and consumer). By reading documentation and searching on the internet I was able to find some references related to other languages (like Java or C).
**Describe the solution you'd like**
I've tried to do something like that, obviously without success.
```
import _pulsar
from pulsar import Client
from pulsar.schema import Schema
from generated_schema.test_pb2 import TodoList
class ProtobufSchema(Schema):
def __init__(self, record_cls):
super(ProtobufSchema,
self).__init__(record_cls, _pulsar.SchemaType.PROTOBUF, ,
'PROTOBUF')
def encode(self, obj):
self._validate_object_type(obj)
return obj.SerializeToString()
def decode(self, data):
return self._record_cls.FromString(data)
def test():
client = Client('pulsar://localhost:6650')
producer = client.create_producer(topic='persistent://cloudacademy/accounts/sso-configuration-updated.v1',
schema=ProtobufSchema(TodoList))
producer.send(TodoList(owner_id=1, owner_name='test'))
```
**Additional context**
For a reference, I'm expecting something like the integration with Avro, but instead with Protobuf (with autogenerated classes)
Guia de contribuição
Direção de pesquisa
Comece lendo a integração Avro existente e a documentação do schema referenciada na issue; em seguida, rastreie como Schema fornece o tipo de schema e o comportamento de serialização. O trabalho estará concluído quando as classes protobuf geradas puderem ser usadas tanto por producers quanto por consumers, e o registro do schema e a codificação/decodificação funcionarem de forma consistente.
Escrita pelo modelo de indexação a partir do texto da issue.
Avaliação
- Stack de tecnologia
- python
- Domínio
- backend, distributed-systems
- Tipo de issue
- Funcionalidade
- Dificuldade
- 4/5
- Tempo estimado
- 3-5 dias
- Status de atividade
- Estagnada
- Clareza
- Razoavelmente clara
- Facilidade para iniciantes
- 35/100