1. Написать докер образ для развертки lakefs.
2. Использовать lakectl вместе с workflow manager system и написать пайплайн загрузки хотя бы двух версий одного файла в развёрнутый lakefs, с последующим чтением и обработкой этих файлов в отдельных шагах пайплайна.
(*) Альтернативно можно воспользоваться одной из библиотек интеграции lakefs с python вместо lakectl.
Our website uses cookies, including web analytics services. By using the website, you consent to the processing of personal data using cookies. You can find out more about the processing of personal data in the Privacy policy