Десять запросов — и ты уже думаешь об индексах.Тысячи запросов — и начинаешь молиться на базу.Миллионы строк — и ищешь, как поделить данные на кластера.А триллионы? Ты уже не инженер. Ты смотритель в зоопарке.И пока ты строишь этот цирк из движков, ответ был прямо перед тобой.В…
Джим Саймонс — один из самых успешных менеджеров хедж‑фондов в истории. Основатель инвестиционной компании Renaissance Technologies и фонда Medallion — самого результативного и самого закрытого фонда в современной финансовой истории. Попробуем собрать информацию из разных источников и разобраться, в чем секрет успеха. Ведь подходы к управлению деньгами, используемые Саймонсом, будут полезны всем, кто управляет деньгами на фондовом рынке. Читать далее
В этой статье будет рассматриваться проект nginx-log-collector, который будет читать логи nginx, отправлять их в кластер Clickhouse. Обычно для логов используют ElasticSearch. Для Clickhouse требуется меньше ресурсов (дисковое пространство, ОЗУ, ЦПУ). Clickhouse быстрее записывает данные. Clickhouse сжимает данные,…
Иногда может возникнуть необходимость запрашивать данные из ClickHouse в реальном времени при выполнении запросов или хранимых процедур на MS SQL. Последний "из коробки" представляет для этого средства только через Linked Server, OLE DB for ODBC и ClickHouse ODBC.Если запрос возвращает немного данных - это вполне рабочий путь. Но если запрос к ClickHouse возвращает десятки тысяч строк, то производительность связки OLE DB for ODBC и ClickHouse ODBC не выдерживает никакой критики. Читать далее