Summary  
This chapter covers how to perform UPDATE and DELETE operations on a versioned data table using SQL-like commands, how those operations generate new table versions by invalidating old files and writing new ones, and how to verify changes with SELECT queries.

General domain of usage  
jewelry inventory management

Tavallisissa Data Lake -ratkaisuissa yksittäisen rivin päivittäminen tai poistaminen on lähes mahdotonta ilman koko tietoaineiston uudelleenkirjoittamista. Koska Delta Lake käyttää transaktiolokia, se tukee tavallisia SQL:n `UPDATE`- ja `DELETE`-komentoja, mahdollistaen tarkat muutokset tauluihisi.


Määritelmä

Edellisessä osiossa keskityit tietojen lukemiseen ja yhteenvedon tekemiseen. Data ei kuitenkaan ole koskaan täysin staattista — saatat huomata, että osa timanttiaineiston hinnoista on virheellisiä tai tietty "cut"-tyyppi täytyy poistaa raporteista.

Koska diamonds-taulu on Delta-taulu, voit muokata sitä kuten perinteistä tietokantaa.

## 1. Tietueiden päivittäminen

`UPDATE`-komennolla voit muuttaa arvoja tietyissä riveissä, jotka täyttävät ehdon. Esimerkiksi, jos kaikille "Fair"-leikkauksen timanteille annetaan 10 % hinnankorotus:

```sql
UPDATE workspace.workshop.diamonds
SET price = price * 1.1
WHERE cut = 'Fair'
```

- **SET** — Määrittää sarakkeelle uuden arvon
- **WHERE** — Tärkeä. Ilman `WHERE`-ehtoa päivittäisit hinnan kaikille timanteille koko taulussa

## 2. Tietueiden poistaminen

`DELETE`-komento poistaa rivit taulusta pysyvästi. Käytä tätä, kun data ei ole enää relevanttia tai se on tuotu vahingossa.

```sql
DELETE FROM workspace.workshop.diamonds
WHERE carat > 5.0
```

Tämä komento tunnistaa kaikki yli 5 karaatin timantit ja poistaa ne taulun aktiivisesta versiosta.

## 3. Muutosten varmistaminen

Päivityksen tai poiston jälkeen muutos kannattaa aina varmistaa yksinkertaisella `SELECT count` -kyselyllä, jotta operaatio toimi odotetusti.

```sql
-- Verify how many 'Fair' diamonds are left (count should be the same, but prices changed)
SELECT count(*) FROM workspace.workshop.diamonds WHERE cut = 'Fair'
```

## 4. Delta-päivitysten turvallisuus

Kun suoritat `DELETE`- tai `UPDATE`-komennon, Delta Lake ei poista dataa vanhoista tiedostoista suoraan. Sen sijaan se noudattaa kolmiportaista prosessia:

1. Merkitsee vanhat tiedostot "epäkelvoiksi"
2. Kirjoittaa uudet tiedostot, jotka sisältävät päivitetyn datan
3. Tallentaa muutoksen Transaction Logiin

Tämän vuoksi **Time Travel** toimii edelleen poiston jälkeenkin — vanha data säilyy taulun tiedostojen aiemmissa versioissa, kunnes historia poistetaan manuaalisesti.

## 5. Paras käytäntö: Testaus SELECT-komennolla

Ennen kuin suoritat `DELETE`- tai `UPDATE`-komennon, testaa aina suodatin ensin `SELECT`-komennolla.

- **Sen sijaan että:** `DELETE FROM diamonds WHERE color = 'J'`
- **Kokeile ensin:** `SELECT * FROM diamonds WHERE color = 'J'`

Jos `SELECT`-tulokset näyttävät täsmälleen ne rivit, jotka haluat poistaa, voit turvallisesti jatkaa `DELETE`-komennolla.

Mitä tapahtuu, jos suoritat UPDATE-komennon ilman WHERE-ehtoa?

Poistaako DELETE-komennon suorittaminen Delta-taulussa tiedot välittömästi taustalla olevasta pilvitallennuksesta pysyvästi?

Käytännönläheinen johdanto Databricksiin, sen keskeisiin käsitteisiin sekä käytännön datan käsittelyyn Pythonilla ja SQL:llä. Kurssi on suunniteltu täysin aloittelijoille, painottaen selkeyttä, yksinkertaisuutta ja käytännön sovelluksia.

Määrittele Databricks yksinkertaisesti ja esittele keskeiset termit ilman ammattisanastoa.

Kirjaudu sisään ja käynnistä laskentaympäristö.

Hallitse ensisijainen kehitysympäristö hyödyntämällä tuttua Pythonia ja SQL:ää.

Käytännönläheinen, käytännön tietojen käsittely DataFramejen avulla (ydintietorakenne).

Esittele tärkein erottautumistekijä, Delta Lake, yksinkertaisesti.

Perustason Tietojen Päivitykset ja Poistot

1. Tietueiden päivittäminen

2. Tietueiden poistaminen

3. Muutosten varmistaminen

4. Delta-päivitysten turvallisuus

5. Paras käytäntö: Testaus SELECT-komennolla

1. Mitä tapahtuu, jos suoritat UPDATE-komennon ilman WHERE-ehtoa?

2. Poistaako DELETE-komennon suorittaminen Delta-taulussa tiedot välittömästi taustalla olevasta pilvitallennuksesta pysyvästi?