Вход/Регистрация
UA RU
UA RU
  • UA
  • RU
  • Новости
  • Front-end
  • Back-end
  • Блокчейн
  • Учебник по Rust
  • Mobile app
  • Книги
  • Подборки
  • Истории
  • Решения
  • Теория
  • Железо
  • Интервью
  • Спецпроекты
  • Реклама в издании
  • Редакционные правила
  • Наша редакция
  • Об издании
  • Контакты
  • Рейтинг блогеров Highload

Присоединяйтесь к нам

  • UA
  • RU
  • Новости
  • Front-end
  • Back-end
  • Блокчейн
  • Учебник по Rust
  • Mobile app
  • Книги
  • Подборки
  • Истории
  • Решения
  • Теория
  • Железо
  • Интервью
  • Спецпроекты
  • Реклама в издании
  • Редакционные правила
  • Наша редакция
  • Об издании
  • Контакты
  • Рейтинг блогеров Highload

Присоединяйтесь к нам

Работа с данными — Highload.today

Главная > Работа с данными
Работа с данными - 2 месяца назад

Парсинг данных с сайтов: что это и на чьей стороне закон

Ольга Змерзла

Авторка та перекладачка

Внедрение Big Data в разные сферы человеческой деятельности  полностью изменило наше восприятие бизнеса и технологий. Появилась необходимость использования специальных инструментов для извлечения, анализа и обработки огромных объемов данных.

Работа с данными - 8 месяцев назад

Мир на пороге квантовой революции: какие у нас перспективы и что нужно знать о квантовых вычислениях

Сергій Пащенко BLOG

Data Engineer в NIX

Привет! Меня зовут Сергей Пащенко, я Data Engineer в NIX и спикер IT-конференции NIX Multiconf. Я большой фанат машинного обучения, Data Science и дата-инженерии в целом. Сегодня для меня уже очевидно, что будущее за квантовыми вычислениями.

Работа с данными - 9 месяцев назад

«Пользуетесь дашбордами? Нет, только смотрим»: объясняем дата-анализ на мемах, понятных каждому

Оленка Пилипчак

Редакторка у Highload

Казалось бы, как можно из такой фановой темы как мемы, рассказывать о серьезных вещах вроде Data Analysis и Business Intelligence? На самом деле сложные понятия и процессы довольно просто объясняются мемами. Понятный всем формат шуток помогает разобраться во многих аспектах Data-анализа. Как именно — узнаем из лекции о Data Analysis, которая состоялась в рамках IT-конференции NIX Multiconf.

Работа с данными - 9 месяцев назад

Спрос на дата-инженеров вырастет: рассказываем, какую технологию сейчас изучать лучше всего

Оленка Пилипчак

Редакторка у Highload

Объем информации в онлайне постоянно растет. Только представьте: ежедневно пользователи по всему миру создают 500 млн твитов, 294 млрд мейлов, 4 млн гигабайт данных в Facebook и 65 млн сообщений в WhatsApp. Вместе с тем возникает потребность в безопасном хранении, быстром обмене и качественном анализе информации. Справиться с этим помогает модель управления данными — Data as a Service.

Книги - 1 год назад

Лучшие книги по Data Science: топ-8 пособий, чтобы прокачаться в науке о данных

Вікторія Пушкіна

Журналістка і технічна редакторка у Highload

По данным DOU, одни из самых высоких зарплат в украинском IT сейчас — в Data Science. В топе по спросу — тоже дата-сайентисты. И один из самых высоких приростов по доходам за последние полгода — сюрприз-сюрприз — тоже у них.

Работа с данными - 1 год назад

Учимся работать с базами данных: подробный гайд по MySQL для PHP-разработчика

Андрей Мелешко BLOG

PHP Developer в NIX

Современные приложения производят все больше объемов данных. Таким образом растет необходимость структурировать все эти огромные массивы информации. Как это сделать? Обратимся за помощью к реляционной базе данных — MySQL. Благодаря доступности, быстрой обработке запросов и надежности хранения данных эта БД уже практически стала стандартом написания веб-приложений.

Работа с данными - 1 год назад

Система поиска напоминает Google: что умеет Elasticsearch и зачем он нужен

Анастасия Дучкина BLOG

PHP Expert в NIX

По данным Fundacion Mapfre, каждую минуту более 4,5 млрд человек отправляют почти 42 млн сообщений в WhatsApp, 2704 раза устанавливают TikTok, публикуют почти 348 000 постов в Instagram и загружают более 147 000 фотографий на Facebook. С каждым годом объем информации растет, а с ней — и требования к системам поиска. Возникает потребность в структурировании, анализе и обработке больших данных. Решить такую задачу можно с помощью Elasticsearch.

Интервью - 1 год назад

Как начать карьеру в Data Science: пять реальных историй

Александра Богуславская BLOG

СЕО & Founder Data Science UA

Привет! Меня зовут Александра Богуславская, я СЕО и Founder в Data Science UA. В течение пяти лет наша компания построила сильное комьюнити в этой сфере: организовывает конференции и курсы, активно развивает направления консалтинга и R&D, открывает AI R&D-центры в Украине для партнеров из Европы и США.

Работа с данными - 1 год назад

Что такое большие данные: коротко о главном

Сергій Бондаренко

Журналіст

Вы никогда не задумывались над тем, как много новой информации появляется ежедневно в интернете? Простейшие события, скажем, открыли страничку Facebook или просто проверили поступившую почту на ящик Gmail — ведут к увеличению объема данных. Это огромное количество информации, которая где-то записывается, растет и растет.

Интервью - 1 год назад

Работал на Большом адронном коллайдере, а теперь — дата-инженер в Ciklum: история айтишника с PhD в квантовой физике

Вікторія Пушкіна

Журналістка і технічна редакторка у Highload

Станислав Сучек, дата-инженер с PhD в квантовой физике

Станислав Сучек — IT-свитчер. Но свитчнулся он из области куда сложнее, чем IT. Посудите сами: Станислав получил докторскую степень в квантовой физике и работал на Большом адронном коллайдере (БАК)!

Machine Learning - 1 год назад

Специалистам по Machine Learning платят больше, чем разработчикам: как им стать, нужна ли математика и другие ответы от эксперта

Вікторія Пушкіна

Журналістка і технічна редакторка у Highload

Использование библиотек Python для визуализации данных / GitHub

На канале основателя школы программирования FoxmindEd Сергея Немчинского вышел стрим с Павлом Галушко. Павел — Tech Lead команды разработки для машинного обучения в Namecheap. На стриме он ответил на самые актуальные вопросы про Machine Learning. Причем (что редко бывает) — кратко и понятно.

Работа с данными - 2 года назад

Без SQL: учимся работать с данными на Elasticsearch

Андрій Денисенко

Автор, розробник та перекладач

Без SQL: учимся работать с данными на Elasticsearch

Elasticsearch — это поисковый и аналитический движок, с помощью которого ваша команда может быстро искать информацию в любых типах данных и анализировать их.

Базы данных - 2 года назад

MS SQL, не болей: 10 причин, почему не устанавливается Microsoft SQL Server (и что с этим делать)

Вікторія Пушкіна

Журналістка і технічна редакторка у Highload

Все сделали по инструкции, но MS SQL Server все равно бунтует? Можно пойти на какой-нибудь форум и пожаловаться там.

Работа с данными - 2 года назад

Элемент случайности: как использовать модуль random в Python

Сергій Бондаренко

Журналіст

Модуль random в Python дает возможность генерировать случайные числа и выбирать случайные элементы из списка. Но давайте обо всем по порядку.

Мнение - 2 года назад

Перевести с языка программистов на «понятный» и наоборот: кто такие бизнес-аналитики и чем они занимаются в IT

Михаил Маршалок BLOG

Junior Pre-sales Business analyst в компании JMind

Бизнес-аналитик

Привет! Меня зовут Михаил, я Junior Pre-sales Business Analyst в компании JMind. Я хочу немного рассказать о том, что такое бизнес-аналитик и с чем его едят.

Опыт - 2 года назад

Как создать команду Data Science в продуктовой компании, используя опыт Google и Spotify

Леонид Литвиненко BLOG

Co-founder & CTO в YouScan

В этой статье я расскажу о том, как мы в YouScan строим Data Science Squad, что означает принцип you build it, you run it, почему наш подход работает и как мы решаем проблемы, с которыми сталкиваемся на своем пути.

Работа с данными - 2 года назад

Лучшие подкасты, чтобы разобраться в Microsoft Power BI

Алла Христич BLOG

аналитик, блогер

Подкасты я открыла для себя примерно лет 11 назад, то есть задолго до того, как Clubhouse стал завоевывать сердца и умы юзеров. Слушала тогда в основном Marketing Over Coffee, и мне очень нравилось, как ведущие то и дело обсуждали в эпизодах разный софт, который им помогал в работе. С тех пор считаю подкасты незаменимым источником новых профессиональных знаний и стараюсь по каждой интересующей меня теме делать подборки.

Работа с данными - 2 года назад

Microsoft Power BI: 4 платформы, чтобы прокачать навыки

Алла Христич BLOG

аналитик, блогер

Совершенствоваться в работе с софтом, в том числе и с Power BI, сегодня легко благодаря многочисленным онлайн-курсам и тьюториалам. Но в какой-то момент мозг, мерзавец, начинает требовать чего-то более захватывающего, чем написание кода и прорисовка визуализаций, и мотивация неизменно падает. Единственное, что выручает в таких случаях, — это возможность пообщаться с людьми со схожими интересами и навыками и посмотреть, как они решают аналогичные проблемы.

Highload - 2 года назад

Решения на NoSQL базах

admin

В этой статье рассмотрим принципы решения типичных задач в key-value базах данных.

Highload - 2 года назад

Горизонтальный шардинг

Игорь Грегорченко

Технический редактор Highload

Так или иначе возникает ситуация, когда на сервере базы данных со временем приходится работать с огромными таблицами.

Highload - 2 года назад

Как скопировать выбранные ключи Redis на другой сервер?

admin

[https://redis.io/ Redis] – простое, быстрое и удобное key-value хранилище данных. При масштабирование любого приложения возникает необходимость переноса данных между серверами. Иногда не нужно переносить всю базу, а только несколько выбранных ключей.

Highload - 3 года назад

Денормализация данных

Игорь Грегорченко

Технический редактор Highload

Нормальная форма хранения данных предполагает избегания дублирования данных. Ключевых правила два:

Highload - 3 года назад

Ребалансировка данных при шардинге

admin

При шардинге неизбежно возникает необходимость перебалансировать данные. Точно предсказать рост объема и формы данных практически невозможно. Поэтому ребалансировка данных – такая же систематическая операция, как и хранение данных. Ее нужно планировать на этапе проектирования, а не на этапе администрирования.

Highload - 3 года назад

Вертикальный шардинг

Игорь Грегорченко

Технический редактор Highload

Обычно Web приложения работают с одним сервером базы данных. Почти всегда приложение использует более одной таблицы.

Топ текстов недели
1.
Что такое ASP.NET? Принцип работы и модели разработки
2.
Если вы просто пишете код — вы не программист, и скоро потеряете работу: как ИИ заставит кодеров исчезнуть через 5 лет
3.
Как работает ChatGPT и чем он полезен программисту: обзор системы
4.
Ученые Стэнфорда создали аналог ChatGPT за $600 и выложили его на GitHub
5.
«Получала $190 тыс. и ничего не делала»: эксрекрутерка Meta поделилась «историей успеха»
6.
Data Scientist в Генштаб, Linux Security Expert в Киберсилы: появились новые вакансии для айтишников в ВСУ
7.
Как не устроиться на работу в ад: советы от рекрутеров и айтишников
8.
GitHub выпустил обновленную версию Copilot X на GPT-4: можно кодить голосом
9.
Европу и Украину «накрыло» хакерской атакой из-за вируса-шифровальщика: рассказываем, как защититься
10.
«Задача босса — заплатить вам как можно меньше»: почему мы больше не строим карьеру и не вернемся в офис
  • Об издании
  • Наша редакция
  • Контакты
  • Политика конфиденциальности
  • Реклама в издании
  • Редакционные правила
  • Как отправить текст в редакцию

Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.


Мы используем иллюстрации от Depositphotos


Отдельные материалы могут содержать ссылки на партнеров. Это не влияет на контент и политику редакции, но дает изданию возможности для развития.


Поддержка серверов

Партнер по SEO

Решение сложных IT-задач

© Highload. 2021-2023

Ваша жалоба отправлена модератору

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам:

Отправить Отмена

Полезные решения для тех,
кто пишет код

Присоединяйтесь
к сообществу: