СУБД 2013 Лекция №10 "Нереляционное решение в области баз данных — NoSQL" Часть 2

Apr 17, 2015Download as PPT, PDF2 likes580 views

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №10 "Нереляционное решение в области баз данных — NoSQL". Лектор - Станислав Ступников. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

“non-relational data
stores that do not need
a fixed schema, and
that usually avoid join
operations”
(Wikipedia, how much more authoritative do you
need)

“Re-inventing MyISAM
is not a selling point.”
-Mark Callaghan Oracle, Google, Facebook

СУБД 2013 Лекция №10 "Нереляционное решение в области баз данных — NoSQL" Часть 2

I know where
everything is, please do
not touch.

6% of the power on the planet goes to data
centers!

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №10 "Нереляционное решение в области баз данных — NoSQL". Лектор - Станислав Ступников. Вводная часть посвящена определению и истории развития концепции NoSQL. Даются характеристики, рассказывается о способах использования. Рассматриваются виды NoSQL БД, теоретические основы NoSQL, а в конце лекции обсуждаются недостатки NoSQL-решений, а также проводится сравнение разных NoSQL-решений. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

Лекция 9. ZooKeeperTechnopark

��

СУБД 2013 Лекция №7 "Оптимизация запросов и индексирование"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №7 "Оптимизация запросов и индексирование". Лектор - Павел Щербинин. Вначале рассказывается об оптимизации доступа к данным, о декомпозиции соединения и состоянии запроса. Далее идёт большой блок, посвящённый оптимизатору запросов (изменение порядка соединения, применение алгебраических правил эквивалентности, оптимизации COUNT(), MIN(), MAX(), вычисление и свертка константных выражений, покрывающие индексы, оптимизация подзапросов, раннее завершение, сравнение по списку IN() и распространение равенства). Затем последовательно рассматриваются такие вещи, как соединение (JOIN) в MySQL, оптимизатор сортировки, коррелированные подзапросы, слияние и непоследовательный просмотр индексов, функции SELECT & UPDATE, COUNT(). После этого рассказывается об оптимизации запросов с помощью JOIN, GROUP BY, DISTINCT и LIMIT со смещением. В конце лекции даётся информация о кэшировании запросов, объединённых таблицах и секционировании. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №5 "Определение узких мест"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №5 "Определение узких мест". Лектор - Павел Щербинин. Вначале рассказывается о подсистемах хранения: MyISAM, InnoDB, Memory, о критериях выбора подсистем хранения, приводятся практические примеры. Затем обсуждается тема индексирования (B-tree, хеш-индексы) и EXPLAIN (столбцы id, table, possible_keys, key, key_len). Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

Лекция 3. Распределённая файловая система HDFSTechnopark

��

Лекция 12. SparkTechnopark

��

Лекция 2. Основы HadoopTechnopark

��

СУБД 2013 Лекция №8 "Конфигурирование базы данных"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №8 "Конфигурирование базы данных". Лектор - Павел Щербинин. Сначала объясняются основы конфигурирования и общие принципы настройки. Далее рассказывается об области видимости, о настройке использования памяти, обсуждается размер блока ключей key_cache_block_size. Рассматривается устройство и использование кэша InnoDB, а также кэшей потоков и таблиц. Затем говорится об особенностях ввода/вывода в InnoDB. Далее рассказывается о табличном пространстве, оптимизации файловой сортировки, переменных состояния. Финальная часть лекции посвящена репликации: настройка, синхронизация, топология, планирование пропускной способности, администрирование и обслуживание, проблемы и их решения. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №9 "Безопасность баз данных"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №9 "Безопасность баз данных". Лектор - Павел Щербинин. Открывается лекция рассказом о резервном копировании (о логических и физических резервных копиях, о выборе данных для копирования). Затем определяется терминология для обсуждения дальнейших вопросов. После этого рассматриваются основы учётных записей: таблицы доступа, привилегии, виды записей. Обсуждаются SQL-injection, список смежных вершин (Adjacency Set), вложенное множество (Nested Set), материализованный путь (Materialized Path) и комбинированный подход. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 6Technopark

��

Проектирование интерфейсов весна 2014 занятие 7Technopark

��

Лекция 7. Введение в Pig и HiveTechnopark

��

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 4Technopark

��

Лекция 1. Введение в Big Data и MapReduceTechnopark

��

Лекция 6. MapReduce в Hadoop (графы)Technopark

��

Лекция 10. Apache MahoutTechnopark

��

Безопасность интернет-приложений осень 2013 лекция 2Technopark

��

Java осень 2014 занятие 3Technopark

��

Android осень 2013 лекция 1Technopark

��

Разработка веб-сервисов осень 2013 лекция 9Technopark

��

Frontend весна 2014 лекция 2Technopark

��

Web осень 2013 лекция 3Technopark

��

Лекция 5. MapReduce в Hadoop (алгоритмы)Technopark

��

Лекция 4. MapReduce в Hadoop (введение)Technopark

��

More Related Content

Viewers also liked (20)

Лекция 3. Распределённая файловая система HDFSTechnopark

��

Лекция 12. SparkTechnopark

��

Лекция 2. Основы HadoopTechnopark

��

СУБД 2013 Лекция №8 "Конфигурирование базы данных"Technopark

��

СУБД 2013 Лекция №9 "Безопасность баз данных"Technopark

��

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 6Technopark

��

Проектирование интерфейсов весна 2014 занятие 7Technopark

��

Лекция 7. Введение в Pig и HiveTechnopark

��

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 4Technopark

��

Лекция 1. Введение в Big Data и MapReduceTechnopark

��

Лекция 6. MapReduce в Hadoop (графы)Technopark

��

Лекция 10. Apache MahoutTechnopark

��

Безопасность интернет-приложений осень 2013 лекция 2Technopark

��

Java осень 2014 занятие 3Technopark

��

Android осень 2013 лекция 1Technopark

��

Разработка веб-сервисов осень 2013 лекция 9Technopark

��

Frontend весна 2014 лекция 2Technopark

��

Web осень 2013 лекция 3Technopark

��

Лекция 3. Распределённая файловая система HDFSTechnopark

��

Лекция 12. SparkTechnopark

��

Лекция 2. Основы HadoopTechnopark

��

СУБД 2013 Лекция №8 "Конфигурирование базы данных"Technopark

��

СУБД 2013 Лекция №9 "Безопасность баз данных"Technopark

��

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 6Technopark

��

Проектирование интерфейсов весна 2014 занятие 7Technopark

��

Лекция 7. Введение в Pig и HiveTechnopark

��

Тестирование весна 2014 смешанное занятие 3Technopark

��

Бизнес весна 2014 лекция 4Technopark

��

Лекция 1. Введение в Big Data и MapReduceTechnopark

��

Лекция 6. MapReduce в Hadoop (графы)Technopark

��

Лекция 10. Apache MahoutTechnopark

��

Безопасность интернет-приложений осень 2013 лекция 2Technopark

��

Java осень 2014 занятие 3Technopark

��

Android осень 2013 лекция 1Technopark

��

Разработка веб-сервисов осень 2013 лекция 9Technopark

��

Frontend весна 2014 лекция 2Technopark

��

Web осень 2013 лекция 3Technopark

��

More from Technopark (13)

Лекция 5. MapReduce в Hadoop (алгоритмы)Technopark

��

Лекция 4. MapReduce в Hadoop (введение)Technopark

��

СУБД 2013 Лекция №6 "Профилирование запросов. Сложноструктурированные SQL-зап...Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №6 "Профилирование запросов. Сложноструктурированные SQL-запросы". Лектор - Павел Щербинин. Лекция открывается рассказом о том, что такое профилирование запроса, каковы его этапы выполнения в MySQL. Рассказывается о том, как планировать запрос, как осуществляется протоколирование запросов, как собирается статистика. Объясняются основы индексирования, подробно обсуждаются стратегии индексирования для достижения высокой производительности: изоляция столбца, кластерные индексы (преимущества и недостатки), размещение данных в MyISAM и InnoDB, покрывающие индексы. Далее затрагивается тема нормализации и денормализации, а также таблиц счётчиков. В завершении рассказывается о версионировании схемы БД: о методах инкрементных изменений, идемпотентных изменений, уподобления структуры БД исходному коду. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №4 "Расширенные возможности работы с базами данных. Триггеры...Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №4 "Расширенные возможности работы с базами данных. Триггеры и хранимые процедуры" Лектор - Павел Щербинин. Первая часть лекции посвящена хранимым процедурам (использование, примеры кода, аспекты безопасности при использовании хранимых процедур): LOOP, REPEAT, WHILE, HANDLER, курсоры, EXECUTE. Во второй части рассказывается о триггерах: BEFORE, AFTER, INSTEAD OF, о специальных таблицах inserted, updated и deleted, об использовании триггеров для поддержания целостности и бизнес-логики, о проблемах при использовании триггеров, приводятся примеры кода. В завершающей части лекции обсуждаются вопросы, связанные с транзакциями: концепция A.C.I.D.; уровни изоляции ANSI/ISO (SET TRANSACTION ISOLATION LEVEL); взаимовлияние транзакций и проблемы lost update, dirty read, non-repeatable read и phantom read; технология MVCC (контроль версионирования конкуренции); конкуренция; параллельность и согласованность. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №3 "Выборка данных (продолжение). Транзакции"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №3 "Выборка данных (продолжение). Транзакции" Лектор - Павел Щербинин. Лекция начинается с рассказа о добавлении данных и операторе INSERT, о модификации данных и операторе UPDATE, об удалении данных и операторе DELETE. Затем небольшая часть лекции посвящена пользовательским переменным. После этого даётся информация о подзапросах: SUBQUERIES, ROW SUBQUERIES, SUBQUERIES in FROM. Далее говорится об агрегации (UNION), о семействе функций JOIN и соединении таблиц, а в завершение лекции — о понятии VIEW (каковы преимущества, ограничения и особенности, алгоритмы использования и изменение). Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №2 "Модификация данных. Выборка данных (начало)"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №2 "Модификация данных. Выборка данных (начало)" Лектор - Павел Щербинин. Сначала завершается рассмотрение типа данных MySQL «Дата и время». Затем рассказывается о создании таблиц (CREATE TABLE): create_definition, column_definition, reference_defenition, обновление кортежа в родительском отношении. Далее обсуждается процедура изменения таблицы (ALTER TABLE), выборка данных и оператор SELECT, а также фильтрация (формирование групп, агрегаторы). Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

СУБД 2013 Лекция №1 "Введение и начало проектирования"Technopark

��

Технопарк Mail.ru Group, МГТУ им. Н.Э. Баумана. Курс "Базы данных". Лекция №1 "Введение и начало проектирования" Лектор - Павел Щербинин. В лекции обсуждаются значение и роли баз данных в IT, даются определения БД и СУБД. Затем рассказывается о реляционной модели данных, об основах реляционной алгебры. Далее говорится непосредственно о проектировании БД: каковы критерии оценки модели данных, особенности концептуального проектирования, этапы проектирования, что такое логическое проектирование. Остальная часть лекции посвящена типам данных MySQL: NULL, целые числа, числа с плавающей точкой, бинарные, строки, дата и время. Видео лекции курса https://www.youtube.com/playlist?list=PLrCZzMib1e9obOz5K695ugYuiOOCBciEi

Java осень 2014 занятие 8Technopark

��

Java осень 2014 занятие 7Technopark

��

Java осень 2014 занятие 6Technopark

��

Java осень 2014 занятие 5Technopark

��

Java осень 2014 занятие 1Technopark

��

Java осень 2014 занятие 2Technopark

��

Лекция 5. MapReduce в Hadoop (алгоритмы)Technopark

��

Лекция 4. MapReduce в Hadoop (введение)Technopark

��

СУБД 2013 Лекция №6 "Профилирование запросов. Сложноструктурированные SQL-зап...Technopark

��

СУБД 2013 Лекция №4 "Расширенные возможности работы с базами данных. Триггеры...Technopark

��

СУБД 2013 Лекция №3 "Выборка данных (продолжение). Транзакции"Technopark

��

СУБД 2013 Лекция №2 "Модификация данных. Выборка данных (начало)"Technopark

��

СУБД 2013 Лекция №1 "Введение и начало проектирования"Technopark

��

Java осень 2014 занятие 8Technopark

��

Java осень 2014 занятие 7Technopark

��

Java осень 2014 занятие 6Technopark

��

Java осень 2014 занятие 5Technopark

��

Java осень 2014 занятие 1Technopark

��

Java осень 2014 занятие 2Technopark

��

Recently uploaded (20)

Fuel part 1.pptx........................ksbhattadcm

��

Adventure Activities Final By H R Gohil SirGUJARATCOMMERCECOLLE

��

How to Setup WhatsApp in Odoo 17 - Odoo �ݺ�ߣsCeline George

��

How to use Init Hooks in Odoo 18 - Odoo �ݺ�ߣsCeline George

��

Year 10 The Senior Phase Session 3 Term 1.pptxmansk2

��

QuickBooks Desktop to QuickBooks Online How to Make the MoveTechSoup

��

If you use QuickBooks Desktop and are stressing about moving to QuickBooks Online, in this webinar, get your questions answered and learn tips and tricks to make the process easier for you. Key Questions: * When is the best time to make the shift to QuickBooks Online? * Will my current version of QuickBooks Desktop stop working? * I have a really old version of QuickBooks. What should I do? * I run my payroll in QuickBooks Desktop now. How is that affected? *Does it bring over all my historical data? Are there things that don't come over? * What are the main differences between QuickBooks Desktop and QuickBooks Online? * And more

How to attach file using upload button Odoo 18Celine George

��

Kaun TALHA quiz Prelims - El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

English 4 Quarter 4 Week 4 Classroom ObsNerissaMendez1

��

cervical spine mobilization manual therapy .pdfSamarHosni3

��

Information Technology for class X CBSE skill SubjectVEENAKSHI PATHAK

��

Blind spots in AI and Formulation Science, IFPAC 2025.pdfAjaz Hussain

��

The intersection of AI and pharmaceutical formulation science highlights significant blind spots—systemic gaps in pharmaceutical development, regulatory oversight, quality assurance, and the ethical use of AI—that could jeopardize patient safety and undermine public trust. To move forward effectively, we must address these normalized blind spots, which may arise from outdated assumptions, errors, gaps in previous knowledge, and biases in language or regulatory inertia. This is essential to ensure that AI and formulation science are developed as tools for patient-centered and ethical healthcare.

SOCIAL CHANGE(a change in the institutional and normative structure of societ...DrNidhiAgarwal

��

Storytelling instructions...............Alexander Benito

��

How to Modify Existing Web Pages in Odoo 18Celine George

��

A PPT Presentation on The Princess and the God: A tale of ancient India by A...Beena E S

��

Modeling-Simple-Equation-Using-Bar-Models.pptxmaribethlacno2

��

Rass MELAI : an Internet MELA Quiz Prelims - El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

The Broccoli Dog's inner voice (look A)merasan

��

Kaun TALHA quiz Finals -- El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

Fuel part 1.pptx........................ksbhattadcm

��

Adventure Activities Final By H R Gohil SirGUJARATCOMMERCECOLLE

��

How to Setup WhatsApp in Odoo 17 - Odoo �ݺ�ߣsCeline George

��

How to use Init Hooks in Odoo 18 - Odoo �ݺ�ߣsCeline George

��

Year 10 The Senior Phase Session 3 Term 1.pptxmansk2

��

QuickBooks Desktop to QuickBooks Online How to Make the MoveTechSoup

��

How to attach file using upload button Odoo 18Celine George

��

Kaun TALHA quiz Prelims - El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

English 4 Quarter 4 Week 4 Classroom ObsNerissaMendez1

��

cervical spine mobilization manual therapy .pdfSamarHosni3

��

Information Technology for class X CBSE skill SubjectVEENAKSHI PATHAK

��

Blind spots in AI and Formulation Science, IFPAC 2025.pdfAjaz Hussain

��

SOCIAL CHANGE(a change in the institutional and normative structure of societ...DrNidhiAgarwal

��

Storytelling instructions...............Alexander Benito

��

How to Modify Existing Web Pages in Odoo 18Celine George

��

A PPT Presentation on The Princess and the God: A tale of ancient India by A...Beena E S

��

Modeling-Simple-Equation-Using-Bar-Models.pptxmaribethlacno2

��

Rass MELAI : an Internet MELA Quiz Prelims - El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

The Broccoli Dog's inner voice (look A)merasan

��

Kaun TALHA quiz Finals -- El Dorado 2025Conquiztadors- the Quiz Society of Sri Venkateswara College

��

СУБД 2013 Лекция №10 "Нереляционное решение в области баз данных — NoSQL" Часть 2

1. Your Guide to No-SQL (Glossary)

2. “non-relational data stores that do not need a fixed schema, and that usually avoid join operations” (Wikipedia, how much more authoritative do you need)

3. GROUP BY ?

4. Map Reduce

5. Joins?

6. Multiple++ Map Reduce

7. Table Scan?

8. Multi-Machine Map Reduce

9. ORDER BY…LIMIT

10. Natural Data Order

11. Map Reduce

12. What about the Features?

13. Forward Rolling Log?

14. No need for aVacuum