Дмитрий Мельничук › jock_tanner Сбер ID
Пишу код за печеньки
Рейтинг
816
№ 1 549 в каталоге
Отзывы
Профессионализм
-/10
Коммуникация
- /10
Город
Хабаровск
Опыт работы
14 лет
На сайте с
2014 года
Юридический статус
Самозанятый
Freelance.Boutique
Премиум-сервис для лучших исполнителей

Apache Ignite Python thin client

Используемые навыки Python

Описание

Apache Ignite – распределённая система обработки данных, ориентированная на высокопроизводительные вычисления в оперативной памяти.

Система реализована на Java, поэтому для обработки данных используются прежде всего языки, реализованные в JVM. Но для использования Ignite в областях, где доминирует Python (CV, NLP, LLM), необходимо было создать клиентскую библиотеку на Python.

Решение

Я реализовал сетевое взаимодействие с кластером Ignite на socket, а трансляцию бинарных данных – на ctypes. Также пришлось перевести многие алгоритмы (вычисление хеш-кодов, выбор ноды, регистрация сложных типов данных и др.) с Java на Python.

Результат

Находясь в контакте с разработчиками и пользователями Ignite, я довёл тонкий клиент от концепции до первой продакшен-версии, с набором тестов на pytest и документацией на Sphinx.

Работа выполнена в соавторстве

Международное сообщество Apache

Оценили проект:

Другие проекты

Все проекты →
Веб-разработка и IT Бэкенд для умного устройства OBE ProBowl
Бэкенд для умного устройства OBE ProBowl
85
Веб-разработка и IT CRM для небольшой компании
CRM для небольшой компании
116
Веб-разработка и IT Интернет-магазин «Восток-Авто»
Интернет-магазин «Восток-Авто»
87
Веб-разработка и IT DFU-STM32
DFU-STM32
151