окей, что делать то ? :)

оптимизировать

как, это уже зависит от хотелок и желания

Если рассуждать логически, то поднимать реплику ради одного запроса на пол часа - бред, как и перегон данных. Поэтому предполагаем, что в потенциале, таких запросов будет не один, и вот тут как раз уже встает второй вопрос, мы хотим быстро получать данные или пофиг. Если пофиг как, то соглашусь, делайте реплику и крутите запросы на ней

? давайте на этом закончим флудить)))

оптимизировать

футуристично, в некоторых случаях.

футуристично, в некоторых случаях.

может быть затратно, но не как не фантастика

как показывает практика, у БД всегда есть что оптимизировать, начиная кривых орм в приложениях

у каждой БД есть свои ограничения

Тут, смотрю, нешуточные страсти разгорелись :) Все это от недосказанности, скорее всего. Короче про бекэнды и прочее. С бекэндом я вас запутал, тк подразумевал скорее так называемый бекоффис. То есть место, где идет постобработка инфомации и аналитика. Бекофис БД имеет совершенно другую структуру. Данные в нее наливает с фронта демон, служба, микросервис (называйте как угодно) после достижения определенных условий и модифицируя их вид. И исходя из того, что это внутренняя система и отделена от фронтэнда - ее можно грузить и гонять как угодно. Железо топовое и ССД-сторадж для нее не критично.

Тут, смотрю, нешуточные страсти разгорелись :) Все это от недосказанности, скорее всего. Короче про бекэнды и прочее. С бекэндом я вас запутал, тк подразумевал скорее так называемый бекоффис. То есть место, где идет постобработка инфомации и аналитика. Бекофис БД имеет совершенно другую структуру. Данные в нее наливает с фронта демон, служба, микросервис (называйте как угодно) после достижения определенных условий и модифицируя их вид. И исходя из того, что это внутренняя система и отделена от фронтэнда - ее можно грузить и гонять как угодно. Железо топовое и ССД-сторадж для нее не критично.

Индексы везде? Slow query логи смотрели? Explain прогоняли? Нам сюда выложить можете?

а если индексы есть и вот это вот всё, и там какая нить 6 нормальная форма с хорошо уложенными данными но аналитику надо по 1-2 млрд записей сделать ? и какой нить hyperloglog не спасет из-за требуемой точности ?

вопрос во времени обработки большого сета данных?

да

с агрегацией и этим вот всем

параллелить

тут других вариантов никогда и не было

бесконечно параллелить не получится

ну, бесконечные данные конечно существуют, но я их обработку на практике не видел

хотя и для этого есть stream processing

а если индексы есть и вот это вот всё, и там какая нить 6 нормальная форма с хорошо уложенными данными но аналитику надо по 1-2 млрд записей сделать ? и какой нить hyperloglog не спасет из-за требуемой точности ?

6NF? о_0 что за БД?

колоночная БД спасет вообще, но с 6NF кликхаусом не попользуешься, а значит платность будет

В таблице есть поля: фамилия, имя, отчество, дата рождения и еще несколько других. Надо выбрать все записи таблицы, при этом в отдельно поле вывести отметку для записей, где для каждого уникального сочетания ФИО даты рождения больше самой минимальной и меньше самой максимальной для каждого уникального ФИО. Если записей с такими ФИО тлько 1 или 2, то они должны быть помечены. Есть телепаты кто понимает что надо получить на выходе?

В таблице есть поля: фамилия, имя, отчество, дата рождения и еще несколько других. Надо выбрать все записи таблицы, при этом в отдельно поле вывести отметку для записей, где для каждого уникального сочетания ФИО даты рождения больше самой минимальной и меньше самой максимальной для каждого уникального ФИО. Если записей с такими ФИО тлько 1 или 2, то они должны быть помечены. Есть телепаты кто понимает что надо получить на выходе?

К основной таблице джойнишь по фио подзапрос: группировка по фио, мин макс др

К основной таблице джойнишь по фио подзапрос: группировка по фио, мин макс др

спс

оконные функции вообще

чуваки, помогите разобрался с концепцией логинов в MSSQL

есть логин в сервере, есть логин в базе

Если открыть его на сервере у него нет маппинга к базе

Если открыть его в базе, то логин там есть, права у него есть

А что говорит прекрасная онлайн документация?

грит что это осиротевшие логины и фиксится это одной командой

Что-то мешает применить эту команду?

ничего, я уже применил её, всё стало хорошо

просто применил чуть позже, чем написал в чатик

отличный диалог ??

Сам придумал, сам решил, сам обиделся.

А можно вопрос уважаемые? Вопрос глупый но мне интересно как деревенщине, Речь про MS SQL. Вот такое выдает: Сообщение 8967, уровень 16, состояние 218, строка 2 В DBCC произошла внутренняя ошибка. Дальнейшая обработка невозможна. Обратитесь в службу поддержки пользователей. Сообщение 7985, уровень 16, состояние 2, строка 2 Предварительная проверка системных таблиц: объект с идентификатором 3. Не удалось прочитать страницу (1:51) и заблокировать ее кратковременной блокировкой типа SH. Инструкция проверки прервана из-за неустранимой ошибки. Результаты DBCC для "gtd150117". Сообщение 8944, уровень 16, состояние 13, строка 2 Ошибка таблицы: идентификатор объекта 0, идентификатор индекса -1, идентификатор секции 0, идентификатор единицы размещения 196608 (тип Unknown), страница (1:51), строка 76. Тест (ColumnOffsets <= (nextRec - pRec)) не прошел. Значения - 4158 и 62. CHECKDB обнаружил 0 ошибок размещения и 1 ошибок согласованности, не связанных ни с одним объектом. CHECKDB обнаружил 0 ошибок размещения и 1 ошибок согласованности в базе данных "gtd150117". repair_allow_data_loss - это минимальный уровень исправления для ошибок, найденных DBCC CHECKDB (gtd150117, repair_allow_data_loss).

repair_allow_data_loss приводит к такому же сообщению

Сам придумал, сам решил, сам обиделся.

Не надо грязи, я не обижался вовсе

Не надо грязи, я не обижался вовсе

Хмм. Спорное заявление. И агрессивное какое-то.

Хватит демонизировать меня:)

Хватит демонизировать Redis. Идеальное решение для сессий и простых очередей без durability.

эт прям как вывешенная красная тряпка

Индексы везде? Slow query логи смотрели? Explain прогоняли? Нам сюда выложить можете?

Еще пока не смотрел. Это не критично. Запас железа позволяет,а это значит, что бизнесу нужно решать другие задачи. Им выработку подавай. А вот когда распидарасит, тогда и закинут нас на разбор завалов.. Ну вы и сами все знаете

Привет, подскажите почему этот update в postgres всем строкам устанавливает одинаковое значение, хотя подзапрос, на который идет join, возвращает разные для всех строк?

https://gist.github.com/dstarcev/351f0da473c3447f73e5262284562bc6

если просто исполнить подзапрос, получается deal_id offer_prices 1 { "1" : 1450000 } 3 { "11" : 0 } 4 { "11" : 1450000 }

при апдейте в таблице deals получаю id offer_prices 1 { "11" : 1450000 } 3 { "11" : 1450000 } 4 { "11" : 1450000 }

нужно прописать связь для таблицы из update и выборки from в условие where

спасибо, вот так прокатило https://gist.github.com/dstarcev/256f0824520973bfb4664b2f263c41aa

получается что таблица в update и в from в первом запросе это разные сущности

странно после sql server

Алиасы для того и вешается, что бы на одну и туже таблицу ссылаться как на разные сущности. Ничего странного.

точно, в апдейте-то не алиас указан. В sql server можно было делать так update deal set offer_prices = prices.offer_prices from deals as deal join ( , то есть в udpate указывать алиас. А тут он ругается relation "deal" does not exist

странно после sql server

Там бы тоже это не сработало, т.к. нет связи всех этих join к обновляемой deals

ага, уже дополнил выше

'ЧТжтч;'

какой тулзой наглядно две базы на разных серверах сравнить (линукс\мускул)?

ERROR: S client not available

кроме перконы

вроде в воркбенче есть, но видимо в платном

нашел еще такую древноту

http://search.cpan.org/dist/MySQL-Diff/bin/mysqldiff

вроде в воркбенче есть, но видимо в платном

в фри тоже вроде бы можно

https://dev.mysql.com/doc/workbench/en/wb-database-diff-report.html

не вижу там в Databases

Доброго всем дня и хорошего вечера. Возник вопрос насчёт SQL запроса. База - MS SQL. Есть 2 таблицы, в первой: »> Humans: Name: char(40); Surname: char(40); Number: bigint; Во второй. »> ProductDate: Number: bigint; ProductCount:int; DefectProductCount:int; Каким образом вывести данные из 1-й и второй таблицы, связь по Number, но сделать так, чтобы из Humans вывести все записи, а из ProductDate только связанные по Number ? Просто вывести - не сложно, SELECT * FROM [Humans], [ProductDate] WHERE [Humans].[Number] = [ProductDate].[Number] Но в данном случае не выводятся записи из таблицы Humans, у которых нет связи с записями из ProductDate. Нужно вывести все записи из таблицы Humans и только те записи из таблицы ProductDate, у которых Number совпадает с полем Number из Humans.

LEFT JOIN: сопоставить таблицы, оставить все строчки, для которых есть запись из левой таблицы, для тех, в которых нет записи из правой таблицы, установить поля в null SELECT * FROM Humans AS left LEFT JOIN ProductDate AS right ON left.Number = right.Number

Number лучше заменить на id, придерживаться underscore_case-конвенции и почитать теорию про джойны, их там много, и они могут по-разному выполняться внутри движка (до этого сам не добрался)

@etkee спасибо за информацию.

На всякиий случай опубликую рабочий вариант запроса: 'SELECT * FROM Humans LEFT OUTER JOIN ProductData ON ProductData.Number=Humans.Number'

привет всем

подскажите пожалуйста как с join'ом обновлять записи таблицы? как правильно оформляется UPDATE с JOIN'ами? просто вместо того что бы писать UPDATE p SET p.name = (SELECT t.name FROM tpost t WHERE t.uuid=p.uuid AND t.uuid_user='972b5264' AND t.edit_type!='x' ), p.text = (SELECT t.text FROM tpost t WHERE t.uuid=p.uuid AND t.uuid_user='972b5264' AND t.edit_type!='x' ), p.tags = (SELECT t.tags FROM tpost t WHERE t.uuid=p.uuid AND t.uuid_user='972b5264' AND t.edit_type!='x' ), .... и так далее ... WHERE p.uuid='F12D6075' AND p.edit_type='x' я хочу одним джоином тоже самое сделать UPDATE p SET p.name = t.name, p.text = t.text, p.tags = t.tags, .... и так далее ... FROM tpost p LEFT JOIN tpost t ON t.uuid=p.uuid AND t.uuid_user='972b5264' AND t.edit_type!='x' WHERE p.uuid='F12D6075' AND p.edit_type='x' вот тут нифига нету: https://firebirdsql.org/refdocs/langrefupd21-update.html но зато тут пишут что люди давно и успешно вот так делают: http://stackoverflow.com/questions/6335388/update-and-left-outer-join-statements сервер firebird 2.5+ подскажите кто в курсе?

у меня ошибку выдает "Dynamic SQL Error\nSQL error code = -104\nToken unknown - line 12, column 5\nFROM\n" ругается на первый FROM в запросе: UPDATE p SET p.name = t.name, p.text = t.text, p.tags = t.tags, .... и так далее ... FROM tpost p LEFT JOIN tpost t ON t.uuid=p.uuid AND t.uuid_user='972b5264' AND t.edit_type!='x' WHERE p.uuid='F12D6075' AND p.edit_type='x' похоже в файерберде нет join'ов в updat'ах https://www.experts-exchange.com/questions/28306878/Firebird-SQL-update-with-inner-join.html

вопрос снят, всем спасибо )

а кто нить вкурсе в 3 версии фаерберда join'ы в updat'ах уже работают?

вообще кто нить юзает фаерберд? и какие лайт субд сейчас в моде? )

ребята, запрос sql в jsp .выводит ошибку в логах Parameter index out of range (1 > number of parameters, which is 0).] with root cause java.sql.SQLException: Parameter index out of range (1 > number of parameters, which is 0).

именно строка where выдает ошибку это условие не отрабатывает но это условие работает WHERE close_dt>=? AND close_dt<DATE_ADD(?, INTERVAL 1 DAY) показывает количество закрытых задач в crm но статус.ид=4 тоже должен показать закрытые задачи

мы не дебажим jsp, и вообще стоит найти что-нибудь эм посовременнее

мы не дебажим jsp, и вообще стоит найти что-нибудь эм посовременнее

у меня стоит bgcrm/там только так

кто может мне помочь , напишите пожалуйста в личку. я заплачу

вот мы и добрались наконец до дна

тебя что-то не устраивает? проваливай

в каком это мире ненормально предлагать деньги за услугу?

любой труд должен оплачиваться