netflix oss in der praxis - jug saxony day...rxjava ist eine umsetzung von rx.net auf basis der jvm...

Senacor Technologies AG

Netflix OSS in der Praxis

Dr. Michael Menzel, Senacor Technologies AG

JUG Saxony Day 2016


Digitalisierung

Netflix OSS in der Praxis, JUG Saxony Day 2016 2

Senacor Technologies AG 3

DIGITALISIERUNG IM BANKENUMFELD

Blue Chips FinTecs

Bank

Netflix OSS in der Praxis, JUG Saxony Day 2016



Digitalisierung ändert die Kundenerwartung

4 Netflix OSS in der Praxis, JUG Saxony Day 2016



8

Geschwindigkeit

Startup- fähigkeit

Agilität

Kurze Releasezyklen



STATUS-QUO: MULTI-KANAL-ARCHITEKTUR

9

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Middleware Application

Service Service …

Middleware Application

Service Service …

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Backend

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

Fro

nte

nd

…

An

ford

eru

ng

en



6 Monoliths.

600 Services. 25 Clients. 45 Backends. Gewachsene Codebasis seit 1995.

(Erinnert sich jemand an J2EE 1.2?)

10


Was nun?

11 11 Netflix OSS in der Praxis, JUG Saxony Day 2016


HANDLUNGSBEDARFE



E2E-commitment durch Vertical-Feature-Teams

ARCHITEKTUR ANPASSUNG

16

Loan Team

UI

Service

Database

Ops

Savings Team

UI

Service

Database

Ops

Trading Team

UI

Service

Database

Ops

Vertical Feature Teams Organisation führt zu

Architektur Produkte statt Projekte



MICROSERVICE-ARCHITEKTUR

17

Web Frontend Clients

Services Layer

SAP … Backend Systems

Mic

roserv

ice

Mic

roserv

ice

…

Mic

roserv

ice

-> Umsetzung der Services auf Basis von Spring Boot



MICROSERVICE-ARCHITEKTUR

Routing und Load-Balancing

Service Discovery

Externe Konfiguration

Service-Komposition

Resilience

Logging, Monitoring und Security



ROUTING UND LOAD-BALANCING

19


Services Layer M

icro

serv

ice

Mic

roserv

ice

…

Mic

roserv

ice

Adresse2:Port2

Adresse1:Port1

Serviceverfügbarkeit unter einheitlicher Domäne -> Reverse Proxy

Technische und fachliche Entkopplung durch Versionierung

http://<domain>:<port>/bank-accounts/v1.0/

CORS ?




20


Services Layer M

icro

serv

ice

Mic

roserv

ice

…

Mic

roserv

ice

ZUUL Reverse Proxy and Load Balancer

Proxy


Zuul: Statische Routen-Konfiguration

zuul: routes: bankaccounts: path: /bank-accounts/v1.0/** url: http://Adresse1:Port1



21

Load-balancer und Fehlertoleranz

zuul: routes: bankAccounts: path: /bank-accounts/v1.0/** serviceId: bankAccounts bankAccounts: ribbon: listOfServers: Adresse1:Port1, Adresse2:Port2

Ribbon: Client-side Load-Balancer Hystrix: Circuit-Breaker Bibliothek zur Umsetzung von Fehlertoleranz



BLAUPAUSE MICROSERVICE-ARCHITEKTUR


Service Discovery


Service-Komposition

Resilience





SERVICE DISCOVERY

23


Services Layer Eure

ka

Serv

ice R

egis

try

Proxy

bank-a

ccounts

: 1.0

.1

bank-a

ccounts

: 2.0

.0

…

bank-a

ccounts

: 1.0

.1

Service-Registrierung beim Start-Up

Heartbeat-Mechanismus

Master/Slave Registry betrieb



SERVICE DISCOVERY

24

ZUUL-Konfiguration mit Service-Registry

zuul: routes: bankAccounts: path: /bank-accounts/v1.0/** serviceId: bankAccounts eureka: client: serviceUrl: defaultZone: <URL Registry>



Service-Aufrufe mit Feign

Einfache Erzeugung von Rest-Clients mit Eureka-Anbindung

Definition über Interface und Annotationen

Aktivierung von Feign-Clients: @EnableFeignClients

@FeignClient("users-service") interface UserClient { @RequestMapping(method = RequestMethod.GET, value = "/user") User getUser(); }

SERVICE DISCOVERY





Service Discovery


Service-Komposition

Resilience




EXTERNE KONFIGURATION

27


Services Layer M

icro

serv

ice

Mic

roserv

ice

…

Mic

roserv

ice

Configura

tion

Serv

er


Eure

ka

Serv

ice R

egis

try

Proxy

Config-Server

Aktivierung über @EnableConfigServer

GIT-Konfiguration über spring.cloud.configrepo.server.git.uri = <uri>

Config-Client

Aktivierung über

cloud: config: enabled: true uri: <url>




28


Services Layer M

icro

serv

ice

Mic

roserv

ice

…

Mic

roserv

ice

Configura

tion

Serv

er


Eure

ka

Ser

vice

Reg

istr

y

Proxy

Config-Client

Dynamische Properties über @RefreshScope

Aktualisierung über /refresh

Optional: Push über Message Bus

PUSH Beispiele dynamische Parameter

Feature Toggles

Endpunkt-Adressen

Fachliche Parameter



Archaius:

Framework zum Zugriff auf Properties

Basis ist Apache Commons

Unterschiedliche Quellen: Properties-Dateien, URLs, Datenbanken

Typsicherer Zugriff

Callbacks bei Änderung






Service Discovery


Service-Komposition

Resilience




Clientseitige Servicekompositionen führen zu Kommunikationsoverhead

SERVICE COMPOSITION


100 ms

Browser

200 ms 300 ms 400 ms 500 ms 600 ms

Services

31

Server Request Latency Network Latency


Clientseitige Servicekompositionen führen zu Kommunikationsoverhead

SERVICE COMPOSITION


Browser Services

32

Net

flix

AP

I

Server Request Latency Network Latency

7 Netzwerkaufrufe zu einem zusammengefasst


Wie lässt sich die API gestallten?

SERVICE COMPOSITION


Einzelner Datensatz

Mehrfache Datensätze

Synchron ObjektIterable

Stream

Asynchron

Callback

Future

CompletableFuture

Observable

33


SERVICE COMPOSITION MIT RXJAVA


The Reactive Extensions (Rx) is a library for composing asynchronous and event-based programs using observable sequences and LINQ-style query operators

https://rx.codeplex.com

34


ReactiveX basiert auf dem Observable-Pattern



Observable Observer register

onNext(T) onError(Throwable t) onCompleted()

35


RxJava ist eine Umsetzung von Rx.Net auf Basis der JVM



LINQ, .NET Framework 3.5 Spracherweiterung zur Abfrage und Transformation von Daten 19.11.2007

RxJS, Rx for JavaScript 17.03.2010

Rx.NET, .NET Framework 4 Rx = Observables + LINQ + Schedulers Asynchrone, Push-basierte Datenverarbeitung 17.11.2009

RxJava, Reactive Extensions for the JVM, started by Netflix02.2013

36


Events in Streams können gefiltert und transformiert werden


Netflix OSS in der Praxis, JUG Saxony Day 2016 37




38


Services Layer Eure

ka

Serv

ice R

egis

try

Proxy


Mic

roserv

ice

Mic

roserv

ice

…

Mic

roserv

ice

Configura

tion

Serv

er

Core

Serv

ice

Core

Serv

ice

Rest Endpoint





Service Discovery


Service-Komposition

Resilience




Resilient software design

Resilience: The system stays responsive in the face of

failure with a graceful degradation of service if required

RESILIENCE, ROBUSTNESS AND SCALABILITY

Insulation

Redundancy

Fallback

Loose coupling




Circuit Breaker Die Sicherung unterbricht den Stromkreis

anstatt eines Hausbrandes – seit 1879

41 41 Netflix OSS in der Praxis, JUG Saxony Day 2016


Synchronen, blockierende Systeme können die Verfügbarkeit von Diensten einschränken


42

Microservice Backend

Req

uests

Tim

e o

ut



Hystrix isoliert den Backend-Zugriffe


43

Microservice

x x

Backend

Fail f

ast




ARCHITEKTUR

44


Services Layer Eure

ka

Serv

ice R

egis

try

Proxy


Mic

roserv

ice

Mic

roserv

ice

…

Mic

roserv

ice

Configura

tion

Serv

er

Core

Serv

ice

Core

Serv

ice

Process Service

Hystrix

Hystrix

Hystrix Hystrix-Integration



Fazit




FAZIT

46


Services Layer

Proxy


Mic

roserv

ice

Identity

Pro

vid

er

…

Mic

roserv

ice

Configura

tion

Serv

er

Core

Serv

ice

Core

Serv

ice

Process Service


Loggin

g u

nd

Monitoring

Eure

ka

Serv

ice R

egis

try


FAZIT

Zuerst planen, …



FAZIT

sonst …



Netflix OSS in der Praxis

Dr. Michael Menzel, Senacor Technologies AG

JUG Saxony Day 2016

netflix oss in der praxis - jug saxony day...rxjava ist eine umsetzung von rx.net auf basis der jvm...

Documents