xtp – Seequality

Memory Optimized Tables a wykorzystanie dziennika transakcyjnego

Adrian Chodkowski July 10, 2017 0 Comments

About
Latest Posts

Follow me

Adrian Chodkowski

SQL geek, Data enthusiast, Consultant & Developer

Follow me

Latest posts by Adrian Chodkowski (see all)

Power BI Desktop – eksport modelu do csv przy pomocy Powershell - August 5, 2019
SQL Server – minimalne logowanie - June 27, 2019
Data Community Kraków #97 – Performance Tuning dla specjalistów Business Intelligence - June 25, 2019

Memory Optimized Tables jako jeden z kluczowych elementów technologii In-memory OLTP pod kątem wydajności potrafi dawać świetne rezultaty. Oprócz całkowicie nowego systemu składowania danych dla tych tabel zmieniony został sposób logowania informacji – to właśnie w MOT mamy możliwość implementacji całkowitej rezygnacji z informacji zawartych w dzienniku transakcyjnym! Chciałbym tutaj podkreślić całkowitego braku logowania, a nie minimalnego logowania – w tradycyjnym podejściu niemal wszystko było w jakiś sposób logowane czy w przypadku nietrwałych tabel In-memory jest podobnie? Mamy jakieś ukryte logowania? Sprawdzimy to w niniejszym artykule, zapraszam do lektury. Tradycyjnie na samym początku stworzymy sobie testową bazę danych wraz z…
Read more

MSSQL, SQL Server database

hekaton, in-memory oltp, xtp

Hash index w In-memory OLTP – tworzenie i zastosowanie

Adrian Chodkowski July 5, 2017 0 Comments

About
Latest Posts

Follow me

Adrian Chodkowski

SQL geek, Data enthusiast, Consultant & Developer

Follow me

Latest posts by Adrian Chodkowski (see all)

Power BI Desktop – eksport modelu do csv przy pomocy Powershell - August 5, 2019
SQL Server – minimalne logowanie - June 27, 2019
Data Community Kraków #97 – Performance Tuning dla specjalistów Business Intelligence - June 25, 2019

Wraz z technologią In-memory OLTP wprowadzone zostały dwa nowe indeksy tj. HASH Index oraz NONCLUSTERED Index. Każdy z nich znacznie różni się od tego co mieliśmy do dyspozycji wcześniej i ma jasno sprecyzowane scenariusze użycia. W ramach niniejszego artykułu chciałbym przedstawić Wam koncepcje pierwszego ze wspomnianych indeksów tj. HASH oraz to w jakich przypadkach może on okazać się dla Was użyteczny. Zacznijmy od stworzenia zestawu danych na którym będziemy pracować:

--check if database exists
DROP DATABASE IF EXISTS Hekaton_Demo
GO

--create database
CREATE DATABASE [Hekaton_demo]
 ON  PRIMARY 
( 
	NAME = N'Hekaton_demo', 
	FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo.mdf' , 
	SIZE = 524288KB , 
	FILEGROWTH = 65536KB 
)
 LOG ON 
( 
	NAME = N'Hekaton_demo_log', 
	FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo_log.ldf' , 
	SIZE = 131072KB , 
	FILEGROWTH = 65536KB 
)
GO


--add special filegroup to database
ALTER DATABASE Hekaton_demo
ADD FILEGROUP AWMemGroup CONTAINS MEMORY_OPTIMIZED_DATA
GO

--add "file" to filegroup
ALTER DATABASE [Hekaton_demo] 
ADD FILE ( 
	NAME = N'Hekaton_demo_inmem', 
	FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo_inmem' 
	) 
TO FILEGROUP [AWMemGroup]
GO

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

--check if database exists

DROP DATABASE IF EXISTS Hekaton_Demo

GO

--create database

CREATE DATABASE [Hekaton_demo]

ON PRIMARY

(

NAME = N'Hekaton_demo',

FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo.mdf' ,

SIZE = 524288KB ,

FILEGROWTH = 65536KB

)

LOG ON

(

NAME = N'Hekaton_demo_log',

FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo_log.ldf' ,

SIZE = 131072KB ,

FILEGROWTH = 65536KB

)

GO

--add special filegroup to database

ALTER DATABASE Hekaton_demo

ADD FILEGROUP AWMemGroup CONTAINS MEMORY_OPTIMIZED_DATA

GO

--add "file" to filegroup

ALTER DATABASE [Hekaton_demo]

ADD FILE (

NAME = N'Hekaton_demo_inmem',

FILENAME = N'C:\Program Files\Microsoft SQL Server\MSSQL13.MSSQLSERVER\MSSQL\DATA\Hekaton_demo_inmem'

)

TO FILEGROUP [AWMemGroup]

GO

Następnie stwórzmy sobie tabelę wraz z interesującym nas indeksem i wypełnijmy ją 100 tysiącami rekordów :

CREATE TABLE dbo.HK_Indexes
(
Id1 int,
Id2 int,
CreatedDate datetime,
   CONSTRAINT PK_ID PRIMARY KEY NONCLUSTERED HASH (Id1,Id2) WITH (BUCKET_COUNT=400000) 
)  WITH (MEMORY_OPTIMIZED=ON, DURABILITY=SCHEMA_ONLY)   
 GO

DECLARE  @Counter INT=0
DECLARE  @NoOfRows INT=100000
 
WHILE @Counter<=@NoOfRows
BEGIN
	 INSERT dbo.HK_Indexes(Id1,Id2,CreatedDate)
	 VALUES (
				@Counter
				,CAST(RAND()*10000 AS INT)
				,DATEADD(DAY,-CAST(RAND()*1000 AS INT),GETDATE()))   
SET @Counter=@Counter+1
END
GO

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

CREATE TABLE dbo.HK_Indexes

(

Id1 int,

Id2 int,

CreatedDate datetime,

CONSTRAINT PK_ID PRIMARY KEY NONCLUSTERED HASH (Id1,Id2) WITH (BUCKET_COUNT=400000)

) WITH (MEMORY_OPTIMIZED=ON, DURABILITY=SCHEMA_ONLY)

GO

DECLARE @Counter INT=0

DECLARE @NoOfRows INT=100000

WHILE @Counter<=@NoOfRows

BEGIN

INSERT dbo.HK_Indexes(Id1,Id2,CreatedDate)

VALUES (

@Counter

,CAST(RAND()*10000 AS INT)

,DATEADD(DAY,-CAST(RAND()*1000 AS INT),GETDATE()))

SET @Counter=@Counter+1

END

GO

Jak możecie zauważyć wskazaliśmy, że interesuje nas indeks hash poprzez wskazanie NONCLUSTERED…
Read more

MSSQL, SQL Server database

hash index, hekaton, in-memory oltp, xtp

In memory OLTP -Wstęp i Memory Optimized Tables

Adrian Chodkowski May 29, 2017 0 Comments

MemoryOptimizedTables_InMemoryOLTPIntro00

About
Latest Posts

Follow me

Adrian Chodkowski

SQL geek, Data enthusiast, Consultant & Developer

Follow me

Latest posts by Adrian Chodkowski (see all)

Power BI Desktop – eksport modelu do csv przy pomocy Powershell - August 5, 2019
SQL Server – minimalne logowanie - June 27, 2019
Data Community Kraków #97 – Performance Tuning dla specjalistów Business Intelligence - June 25, 2019

W ostatnim czasie zainteresowałem się nieco technologią In-memory OLTP zachęcony paroma demonstracjami, które było mi dane zobaczyć na przestrzeni ostatnich miesięcy. Dlatego też postanowiłem podzielić się z czytelnikami wiedzą na temat tej właśnie technologii – ten post jest swoistego rodzaju wstępem do tego aby zacząć zabawę z Hekatonem i ma za zadanie zachęcić Was do zgłębiania wiedzy na temat tego świetnego produktu. Hekaton to nazwa kodowa omawianej technologii i nie jedyna, oficjalnie możemy ją nazywać In-memory OLTP ale funkcjonuje jeszcze trzecia nazwa, a mianowicie XTP czyli akronim od eXtreme Transaction Processing. Każda z tych nazw gdzieś funkcjonuje – pierwsza używana…
Read more

Databases, MSSQL

hekaton, in-memory oltp, memory optimized tables, xtp

SQL Server 2016 – usprawnienia In-memory OLTP

Adrian Chodkowski May 26, 2017 2 Comments

SQLServer2016_InmemoryOLTPImprovements000

About
Latest Posts

Follow me

Adrian Chodkowski

SQL geek, Data enthusiast, Consultant & Developer

Follow me

Latest posts by Adrian Chodkowski (see all)

Power BI Desktop – eksport modelu do csv przy pomocy Powershell - August 5, 2019
SQL Server – minimalne logowanie - June 27, 2019
Data Community Kraków #97 – Performance Tuning dla specjalistów Business Intelligence - June 25, 2019

Seria Poznaj SQL Server 2016! Dziś powiemy sobie parę słów na temat głównego produktu wprowadzonego w SQL Server 2014 tj. In-memory OLTP aka Hekaton aka XTP (eXtreme Transaction Processing), a właściwie o ulepszeniach tej technologii dostępnych w SQL Server 2016. Funkcjonalność ta to nic innego jak kompilowane do kodu maszynowego tabele, procedury składowane, funkcje itp. przechowywane w pamięci operacyjnej. Struktury tego typu dawały bardzo duży wzrost wydajności ze względu na zmniejszenie wpływu operacji IO związanych z pobieraniem danych z dysku twardego, nowe sposoby indeksacji, optymalizacji logowania operacji oraz całkowicie optymistyczny model współbieżności tzn. brak struktur typu lock czy latch. Jednakże…
Read more

MSSQL, SQL Server database

in-memory oltp, memory optimized tables, native compilation, sql server 2016, xtp

Tag Archive: xtp

Latest posts by Adrian Chodkowski (see all)

Latest posts by Adrian Chodkowski (see all)

Latest posts by Adrian Chodkowski (see all)

Latest posts by Adrian Chodkowski (see all)