Публикации по теме 'apache-kafka'
Потоковая обработка: критический компонент MLOps для торговых ботов на основе ML
Эта статья входит в серию статей о MLOps от 1des .
Автоматизированные торговые боты становятся все более популярными на финансовых рынках, а алгоритмы машинного обучения (МО) позволяют многим из этих ботов делать более точные прогнозы и принимать решения на основе закономерностей и тенденций рыночных данных. Однако, чтобы торговые боты на основе машинного обучения были эффективными, они должны быть в состоянии быстро и точно обрабатывать большие объемы рыночных данных в режиме реального..
Вопросы по теме 'apache-kafka'
Spring Integration Kafka медленная обработка сообщений при использовании KafkaNativeOffsetManager
Мы успешно использовали SI Kafka для нового проекта. До недавнего переключения мы использовали KafkaTopicOffsetManager для управления смещением темы наших потребителей. Чтобы не создавать дополнительных тем для каждой пары потребитель / тема и...
19.11.2023
Интеграция Apache Storm Trident и Kafka Spout
Я не могу найти хорошую документацию для правильной интеграции Kafka с Apache Storm Trident. Я попытался изучить связанные ранее опубликованные здесь вопросы, но не получил достаточной информации.
Я хотел бы связать Trident с Kafka как...
03.10.2023
Локальная или удаленная банка для отправки Spark
У меня есть задание spark-submit, работающее в пряже-клиенте (драйвер на стороне клиента), которое, помимо других функций, читает и отправляет сообщения через Kafka.
В моем кластере только брокерские узлы Kafka имеют jar-файлы Kafka, и я бы...
04.11.2023
Зачем включать кеши записей в API процессора потоков Kafka, если RocksDB буферизуется в памяти?
Я пытаюсь понять поведение RocksDB в API процессора потоков Kafka. Я настраиваю постоянное хранилище StateStore, используя стандартную базу данных RocksDB, которую предоставляет KStreams.
StoreBuilder countStoreBuilder =...
04.10.2023
Не удалось установить соединение kafka с брокером kafka
Я использую Mac и устанавливаю zookeeper и kafka через
brew install confluent-platform
Используя следующие команды,
zookeeper-server-start /usr/local/etc/kafka/zookeeper.properties
kafka-server-start /usr/local/etc/kafka/server.properties...
29.09.2023
Как интерпретировать показатели задержки, сообщаемые брокером kafka
Я смотрю, как брокер kafka сообщил о различных показателях задержки, чтобы включить их в панель управления Grafana, но мне трудно понять сообщаемые показатели. Я экспортировал метрики в Prometheus через JMX-экспортер. например, возьмем метрику...
02.12.2023
Тема __consumer_offsets, показывающая другую конфигурацию при описании с помощью zookeeper и bootstrap-server
Версия Kafka — 2.4.0 Я использую скрипт kafka-topics.sh для описания темы __consumer_offsets с двумя вариантами ниже
--bootstrap-сервер
--zookeeper (уСТАРЕЛО)
Оба они показывают разный фактор репликации и конфигурацию темы.
Может ли...
13.11.2023
Как завершить работу кластера Confluent Cloud?
В Confluent ( https://confluent.cloud ), похоже, нет возможности выключить кластер Kafka:
Я пытаюсь ограничить свои расходы и выключить кластер. Я изучил различные варианты на скриншоте выше, но я не нашел места, где можно выключить кластер.
27.09.2023
Новые материалы
Коллекции публикаций по глубокому обучению
Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..
Представляем: Pepita
Фреймворк JavaScript с открытым исходным кодом
Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..
Советы по коду Laravel #2
1-) Найти
// You can specify the columns you need
// in when you use the find method on a model
User::find(‘id’, [‘email’,’name’]);
// You can increment or decrement
// a field in..
Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv)
Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..
3 способа решить квадратное уравнение (3-й мой любимый) -
1. Методом факторизации —
2. Используя квадратичную формулу —
3. Заполнив квадрат —
Давайте поймем это, решив это простое уравнение:
Мы пытаемся сделать LHS,..
Создание VR-миров с A-Frame
Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..
Демистификация рекурсии
КОДЕКС
Демистификация рекурсии
Упрощенная концепция ошеломляющей
О чем весь этот шум?
Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..