-=авто-флудилка!!! Том10=-

[_pavel]

Хана топику, опять сутулые набежали

Та ваше. Тут обвещают вечный двигатель, еще и тремя способами.

[RaS]

Та ваше. Тут обвещают вечный двигатель, еще и тремя способами.

Сколько заплатишь если таки принесут?

[_pavel]

Сколько заплатишь если таки принесут?

Весь своей кешбек от моно

[Glavriba]

Ну давай, удиви меня
Есть дубликаты по всем ключевыми полям входящим в композитный бизнес ключ. Удали Все, кроме одного. Без использования промежуточно внешнего датасета. Никакие артфишел колонки конкретной импелементации не доступны. Только бизнес данные.

create table ogorod (
id number);

insert into ogorod (id) values (1);
insert into ogorod (id) values (1);
insert into ogorod (id) values (1);

Жду, конкретный SQL к чему ты "привяжешься" в своем делит стейтмненте.

ня

[_pavel]

Хана топику, опять сутулые набежали
Я вообще нуб в SQL/NOSQL. Промежуточный чтобы выбрать какое-то поле которое должно быть уникальным?

промежуточный, чтобы созхранить уникальный датасет. Собсно что что и делают в БигКвери .

1) выбрать уникалный и сохранить его гдето (в другой таблице)
2) транкейтнуть оригинальную
3) влить назад.

ну там еще опции есть с переменованием, но то уже вариации одного подхода, Требующего временный сегмент (физический или в памяти)

[Wadim]

Ну давай, удиви меня
Есть дубликаты по всем ключевыми полям входящим в композитный бизнес ключ. Удали Все, кроме одного. Без использования промежуточно внешнего датасета. Никакие артфишел колонки конкретной импелементации не доступны. Только бизнес данные.

create table ogorod (
id number);

insert into ogorod (id) values (1);
insert into ogorod (id) values (1);
insert into ogorod (id) values (1);

Жду, конкретный SQL к чему ты "привяжешься" в своем делит стейтмненте.

добавляем колонку с бизнес данными заполненными роунам ) и задача свелась к классической) имхо добавить/удалить колонку проще чем через промежуточную таблицу

[RaS]

ня

Это сработает на терра-пета-байтах?

[Glavriba]

Это сработает на терра-пета-байтах?

CTE заменить на темптейблу и в путь
ну или влить в новую старую транкейтнуть и влить обратно остатки

[RaS]

CTE заменить на темптейблу и в путь

так будет ж то же что и Павел написал, нет?

[Glavriba]

так будет ж то же что и Павел написал, нет?

нет, я про перформанс

[Glavriba]

Ну давай, удиви меня

create table ogorod (
id number);

insert into ogorod (id) values (1);
insert into ogorod (id) values (1);
insert into ogorod (id) values (1);

Жду, конкретный SQL к чему ты "привяжешься" в своем делит стейтмненте.

щас Павел скажет шо это не то и ваще оно не работает)

[_pavel]

ня

Ай молодец ай не понял что реализацию нельзя использовать.
это будет работать в БигКвери?

[_pavel]

щас Павел скажет шо это не то и ваще оно не работает)

нет не работает. Это не часть стандарта. Я даж не знаю где такого гавно кроме SQL сервера сработает.

[RaS]

Ай молодец ай не понял что реализацию нельзя использовать.
это будет работать в БигКвери?

https://cloud.google.com/bigquery/do...ons#row_number
Не будет?

[_pavel]

https://cloud.google.com/bigquery/do...ons#row_number
Не будет?

with + select != with + delete

по сути в SQL server, там темповый сегмент и создается.
Ну тут как в анекдоте - суслика видишь? а он существует.

[_pavel]

добавляем колонку с бизнес данными заполненными роунам ) и задача свелась к классической) имхо добавить/удалить колонку проще чем через промежуточную таблицу

DDL в продакшене, еще и динамический - уважаю

[Glavriba]

нет не работает. Это не часть стандарта. Я даж не знаю где такого гавно кроме SQL сервера сработает.

пользуйся
CREATE OR REPLACE TABLE Ogorod
AS
SELECT DISTINCT * FROM Ogorod

or
CREATE OR REPLACE TABLE Ogorod
AS
SELECT *

FROM (
SELECT
*,
ROW_NUMBER()
OVER (PARTITION BY ID)
row_number
FROM Ogorod
)
WHERE row_number = 1

[_pavel]

пользуйся
CREATE OR REPLACE TABLE Ogorod
AS
SELECT DISTINCT * FROM Ogorod

Кхм, речь была про DML.
Это и есть подхода с промежутным сегментом. Ко всему прочему тоже не стандарт. За БигКвери не знаю сработает там или нет. В любом случае это вариант песочницы только.

[Glavriba]

я там еще вариант добавил - в БигКвере должно работать

а пока пойду писать то за шо мне заплатят)

[Zebr]

Что тут, заново открыли Америку то, что дистинкт в бигдейте - дорого?

Если посмотреть, что там на задворках дейтафлоу происходит при каждом(даже маленьком) запросе в BQ - обсуждать такие мелочи, как временную таблицу, перехочется.