Перейти до основного вмісту

Публікації

Показано дописи з січень, 2025

Стратегії ребалансування в Kafka

Стратегії ребалансування в Kafka Ребалансування (Rebalancing) — це процес перерозподілу партицій між споживачами (сonsumer) у групі (Consumer Group). Kafka має кілька стратегій ребалансування: RangeAssignor. Ця стратегія розподіляє партиції на основі діапазонів, які створюються відповідно до сортування топіків і партицій. Наприклад, якщо є два консюмери і 6 партицій (P0–P5), перший консюмер отримає P0–P2, а другий — P3–P5. Особливості: Простий алгоритм. Може призводити до нерівномірного розподілу, якщо кількість партицій не ділиться порівну між консюмерами. RoundRobinAssignor. Ця стратегія рівномірно розподіляє партиції між консюмерами за круговим принципом. Наприклад, якщо є два консюмери і 6 партицій, перший отримає P0, P2, P4, а другий — P1, P3, P5. Особливості: Гарантує більш рівномірний розподіл партицій. Використовується в багатотопікових сценаріях. StickyAssignor. Ця стратегія намагається мінімізувати кількість змін у розподілі партицій між консюмерами при ре...

Основи Elixir

Elixir — це функційна мова програмування, яка працює на віртуальній машині Erlang (BEAM). Вона призначена для створення масштабованих і відмовостійких систем. Elixir успадкував багато переваг Erlang, таких як легкість паралельного програмування та висока доступність, але також додав сучасний синтаксис та інструменти для розробки. Основні концепції Elixir Elixir є функційною мовою, тому вона орієнтована на використання функцій та незмінних даних. Ось декілька ключових концепцій: Незмінність даних. Усі дані в Elixir є незмінними, що спрощує роботу з паралельними процесами. Функції. Функції є основним будівельним блоком програми. Вони можуть бути анонімними або іменованими. Паттерн-матчинг. Elixir використовує паттерн-матчинг для роботи з даними, що дозволяє легко розбирати структури даних. Процеси. Elixir використовує легкі процеси для паралельного виконання завдань. Ці процеси ізольовані та спілкуються через передачу повідомлень. Синтаксис Elixir Синтаксис Elixir є прос...

Основні поняття Apache Kafka

Producer - клієнт, який генерує (публікує) повідомлення в Kafka-топік. Може відправляти повідомлення в конкретну партицію (використовуючи ключ) або дозволяти Kafka автоматично вибирати партицію. Підтримує acknowledgments для підтвердження успішного запису. Consumer - клієнт, який читає повідомлення з Kafka-топіка. Консюмери об'єднуються в групи споживачів (consumer groups), щоб розподіляти навантаження. Кожна партиція обробляється лише одним консюмером у межах групи. Message - основна одиниця даних у Kafka. Складається з ключа (optional), значення (дані) та метаданих. Зберігається у партиції топіка. Topic - логічна категорія або ім'я каналу, через який Kafka передає дані. Дані в Kafka організовані в топіки. Кожен топік може мати одну або більше партицій. Споживачі (consumers) читають дані із заданих топіків. Partition - фізичний підрозділ топіка, який зберігає впорядковану послідовність повідомлень. Повідомлення у партиції мають унікальний offset (зміщення). Партиції р...

Регулярні вирази в JavaScript

Створення регулярних виразів Регулярні вирази в JavaScript можна створити одним із наступних способів: let reg1 = new RegExp("abc"); let reg2 = /abc/; Основні можливості та метод test() Метод test() дозволяє перевірити, чи відповідає наступний текст регялрному виразу. console.log(reg1.test("abcd")); //true console.log(reg2.test("abbcd")); //false Регуоярний вираз для перевірки наявності цифр в рядку: console.log(/[0-9]/.test("year 2025")); //true console.log(/[0-9]/.test("this year")); //false Часто використовуються наступні позначення: \d - будь-яка цифра \w - алфавітно-цифровий символ \s - пробільний символ (пробіл, табуляція, новий рядок) \D - не цифра \W - не алфавітно-цифровий символ \S - не пробільний символ . - будь-який символ окрім переведення рядка Для інверсії можна використати символ ^ . Наприклад: let notBinary = /[^01]/; console.log(notBinary.test("1040011210101110")); //tru...

Встановлення Elixir на Ubuntu

Мова програмування Erlang Erlang — це функційна мова програмування, створена в 1987 році шведською компанією Ericsson для розробки телекомунікаційних систем. Основною її метою є забезпечення високої надійності, масштабованості та паралельності, що робить її ідеальною для систем, які потребують обробки великої кількості одночасних запитів, наприклад, телефонні станції, месенджери або ігрові сервери. Головною особливістю Erlang є його модель акторів, яка використовується для паралельного програмування. Кожен процес в Erlang є незалежним і взаємодіє з іншими через передачу повідомлень, що забезпечує відмовостійкість та ізоляцію помилок. Це робить мову дуже ефективною для створення розподілених систем, де збої в одній частині програми не впливають на її інші компоненти. Erlang також має вбудовану підтримку гарячого оновлення коду, що дозволяє змінювати програму без зупинки її виконання, що є критично важливим для багатьох бізнесів. Мова програмування Elixir Elixir — це сучасна функ...