EnergiNorge-USMB-14 jan2015

Elhub-prosjektet
- hva betyr det for min virksomhet ?
- for markedsprosessene ?
- for mine kundedata ?
… og hva må min virksomhet gjennomføre av tilpasninger
og forberedelser før Elhub er i operativ drift ?
Tidsplan
• Kl.10.00-10.30 – om Elhub
• Kl.10.30-12.00 – Om datamigrering
• Kl. 12.00 – 12.30 Lunsj
• Kl.12.30 – 13.30 Om datamigrering og test
• Kl.13.30 – 14.00 Spørsmål og svar
14.01.2015
Bunntekst
2
Overordnet agenda
Innledning - kort om Elhub
Tidsaktuell fase i arbeidet med Elhub
Oppgaver og snitt mot nettselskap og kraftleverandør
Spørreundersøkelse om selskapenes forberedelse
Forberedelse for datamigrering og migreringsprosessen
Testprosessen og sertifisering av aktører som skal bruke Elhub
Spørsmål og svar
14.01.2015
Bunntekst
3
Innledning - kort om Elhub
Anskaffelsesprosess
og implementeringsplan
Forskriftsprosessen
FOR301
– NVE vedtak 1kv. 2015
Operativ drift
01.10.2016
Hjelp ?
14.01.2015
4
Oppdrag/Scope fra regulator/NVE
Elhub 1.0 (Oktober 2016)
•
•
•
•
•
•
•
•
•
•
•
Eventuelt Elhub 2.0 (tidspunkt ubestemt)
Grunnlagsdata og strukturdata
• En Regning (fellesfakturering fra leverandør)
Motta og lagre måleverdier
• Leverandørsentrisk (endelig)
o AMS og gamle målere
• Leveranseplikt (nye regler)
o Forbruk
• Stenging og struping (brukt i markedsmodellen)
o Produksjon
o Utveksling mellom nettområder
Distribusjon av måleverdier
Leverandørbytte
Flytting og opphør
Aggregering av måleverdier for balanseavregning
Avviksoppgjør-underlag
Aggregering El-sertifikat plikt
Sluttbrukers tilgang til egne data
Statistikk rapportering
AMS tilleggstjenester
o adgang for "tredjeparter"
Tidsaktuell fase i arbeidet med Elhub
14.01.2015
Bunntekst
6
Prosjektstatus - Fremdrift
År
Aktivitet
Måned
2013
2014
2015
2016
2017
2018
9 101112 1 2 3 4 5 6 7 8 9 101112 1 2 3 4 5 6 7 8 9 101112 1 2 3 4 5 6 7 8 9 101112 1 12 3 4 5 6 7 8 9 101112 1 12 3 4 5 6 7 8 9 101112
Beslutningsport 1
Kravspesifikasjon
Beslutningsport 2
Valg av leverandør
Beslutningsport 3
Systemimplementasjon og test
Datamigrering og markedstest
Elhub i drift
Beslutningsport 4 og 5
Planlagte bransjerådsmøter
NVE Forskriftsarbeid
(Elhub/NBS)
NVE Forskriftsarbeid
(Leverandørsentrisk/En-regning)
AMS implementering
Elhub versjon 2
14.01.2015
7
Oppgaver og snitt mot nettselskap og
kraftleverandør
14.01.2015
Bunntekst
8
Endring fra dagens kommunikasjonsmetodikk
"i dag, snakker alle med alle"
"alle snakker med en datahub"
Nettselskap
Kraftleverandør
1
A
1
A
B
2
B
3
C
D
4
D
…
…
2
Måleverdier
Grunndata
Sluttbruker info.
3
4
…
C
Bytte
Flytte
Avregningsdata
Kraftleverandør
Nettselskap
til
2.8 mill. målepunkter
Ca. 1 mill. bytte og flytte per år.
elhub
…
Elhub i kraftmarkedet – en oversikt
elhub
Kraftleverandør
• Kundeinformasjon
• Kraftavtaler
• Grunndata
database
Nettselskap
• Målepunkt
• Grunndata
• Kundeinfo.
• Avtaler/endringer
• Målepunkt
• Grunndata
• Strukturdata
• Strukturdata
• Måleverdier
database
• Historikk
Sluttbruker
informasjon
Målepunkt
informasjon
Oversikt for roller, funksjoner og tilganger i elhub løsningen
Elhub
operatører
Markedsaktører
Offentlige
etater
Åpen
Øvrige
Interessenter
Øvrige
Interessenter
WEB
WEB
Sluttbruker
WEB
Kraftleverandører
B2B
Tredje
parter
B2B
Firma og brukeradm.
KPI monitorering
Markedsprosesser
Rapportering
WEB
Rapportering
Statistikk
Åpeninformasjon
"Nettselskap "
tilknyttede roller
Web portal
Autorisering
KPI Monitorering
Prosess adm.
Feilhåndtering
Rapportering/Statistikk
konfigurering
Elhub adm.
"Kraftleverandør"
tilknyttede roller
WEB
Måleverdier
Markedsprosesser
B2B
Netteiere
Måleverdier og
aggregerte data
Måleverdier og
aggregerte data
B2B
Balanseansvarlige
Måleverdier
Måleverdier og
aggregerte data
B2B
NBS
Aggregerte data
B2B
NECS
B2B
Markedsaktører
Tilsagnsfullmakter
Grunndata
Markedsprosesser
(Markedsprosesser)
Elhub
Produsenter
Markedsaktører
B2B
WEB
Måleverdier og
aggregerte data
Sertifisering, Ediel portalen
Web Portal:
- Aktørenes tilgang til tjenestene i Elhub løsningen
Elhub
operations
WEB
Public
Stakeholders
Open
WEB
WEB
WEB
KPI monitorering og
rapportering
Markedsprosesser
Meldinger
Bruker adm.
Select
Total metering Points collected
Total Load Total Production Exchange
Total Consumption JIP
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y
234456
211010,4
23445,6
232111,44 2344,56
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y
234456
211010,4
23445,6
232111,44 2344,56
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y Total Load
234456Total Production
211010,4Exchange 23445,6Total Consumption
232111,44JIP
2344,56
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y
234456
211010,4
23445,6
232111,44 2344,56
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y
234456
211010,4
23445,6
232111,44 2344,56
Grid Area X
234456
211010,4
23445,6
232111,44 2344,56
Grid Area Y
234456
211010,4
23445,6
232111,44 2344,56
Fixed reports/ statistics
Grid Area X
Grid Area Y
Grid Area X
Grid Area Y
Grid Area X
Grid Area Y
Rapportering
Statistikk
Åpeninformasjon
Web portal
Authorisation
KPI Monitoring
Processes operation
Error correction
Reporting/Statistics
(Re-)Configurations
Elhub adm.
Markedsaktører
Market Party
Market Balance Area
Metering Grid Area
Total Load Total Production Exchange
Total Consumption JIP Total Load Total ProductioExchange
n
Total ConsumptiJIPon
Total Load Total ProductioExchange
n
Total ConsumptiJIPon
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
Market Party
Market Balance Area
Metering Grid Area
Grid Area X
Grid Area Y
Grid Area X
Grid Area Y
Grid Area X
Grid Area Y
KPI Monitoring
Select
Select
Market Party
Market Balance Area
Metering Grid Area
Select
Market Party
Market Balance Area
Metering Grid Area
Total Load Total Production Exchange
Total Consumption JIP Total Load Total ProductioExchange
n
Total ConsumptiJIPon
Total Load Total ProductioExchange
n
Total ConsumptiJIPon
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
234456
211010,4
23445,6
232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56 234456 211010,4 23445,6 232111,44 2344,56
Online requests
Maskin til maskin kommunikasjon via XML meldinger
Sluttbruker
WEB
Kraftleverandører
B2B
Tredje
parter
B2B
Produsenter
B2B
100 kraftselskap
Måleverdier
Markedsprosesser
B2B
Netteiere
Måleverdier og
aggregerte data
Måleverdier og
aggregerte data
B2B
Balanseansvarlige
Måleverdier
Måleverdier og
aggregerte data
B2B
NBS
Aggregerte data
B2B
NECS
Tilsagnsfullmakter
Grunndata
Markedsprosesser
(Markedsprosesser)
Elhub
Måleverdier og
aggregerte data
? 3parter ?
130 nettselskap
New metering point
121
Start of supply - move in - in the future
Activation of metering point
122
103
Start of supply - move in - back in time
New grid access contract - move in)
123
104
Change of Supplier from last resort
111
Rollback - start of supply
101
Start of supply - change of supplier
102
Rollback of new metering point
Rollback of activation of metering point
Rollback of new grid access contract
201
202
221
222
End of supply due to move out
End of supply
211
212
Rollback of removal of metering point
Balance
Supplier
301
Se www.elhub.no\dokumenter for mer info !
303
305
311
315
322
324
224
302
Request master data - balance supplier
Request master data - grid owner
304
Settlement type change
306
Reporting of metering values for profiled MP
312
Reporting of metering values for non-profiled MP
313
Reminders of metering values from grid owner
314
Structure data change
Meter reading and expected annual consumption
Request for metering values - balance supplier
Preliminary Profiled Consumpt. to balance supplier
Request for metering values - grid owner
Request basis for settlement - balance supplier/
responsible
Quality assurance - grid owner
101
223
Update master data - grid owner
Update Grid Loss parameters
401
213
Update master data - balance supplier
Update Expected Annual Consumption
391
133
Deactivation of metering point
Rollback of deactivation of metering point
Rollback of move out
132
Move out from metering point - from grid owner
Removal of metering point
Rollback of end of supply
131
Request for pass-through billing (not decided yet)
Request basis for settlement - grid owner
Corrections of master data - from balance supplier
Corrections of master data - from grid owner
BRS main processes
Elhub
BRS support processes
316
317
318
321
325
402
123
Grid
Owner
Messages/process components I
Grid Access Provider
3
Meter Read/Annual Consumption
(Meter Read, Annual Consumption)
4
Query (Standard, Rejected)
5
Master data Update (Standard,
Change of Supplier, Move In, Customer,
MP Char, Portfolio, Updates)
6
Settlement
8
Reconciliation
9
End of Supply (Standard,
Cancellation, Rollback, Move-out)
10
End of Supply (Change of Supplier,
Move-out, Rollback)
11
Terminate
Metering values (Complete, Up – new meter,
Meter read, Quantity, Withdrawal, Reply) 7
Start-up
Master data Update
Start of Metering Point
(Standard, Rollback)
13
Start of Metering Point (Change of
14
Supplier, Last Report, Move-in, Rollback)
Master data Update (Std., New MP, Open,
Closure, Removal, Rollback, Settlement) 15
Metering Values (Up, Meter read,
16
Quantity, Withdrawal, Annual consumption)
Query (Standard, Rejected)
Update
2
17
Master data Update (Customer, MP Char,
18
Portfolio, Updates)
Metering Values (Complete, Meter read,
Quantity, Withdrawal)
12
Meter Read / Annual Consumption from Bal.
Suppl.(Meter Read, Annual consumption) 19
Terminate
Start of Supply (Supplier of last resort,
Possible customer, Rollback)
Structure data, Master data, Metering values, Calculations
1
Update
Start of Supply (Change of Supplier,
Move In, Cancellation, Rollback)
Start-up
Balance Supplier
Settlement
20
Reconciliation
21
End of Metering Point
(Standard, Cancellation, Rollback)
22
End of Metering Point
(Standard, Cancellation, Rollback)
23
Messages/process components II
Grid Access Provider
Balance Supplier
Request to Grid Access Provider
Request to Grid Access Provider
25
Feedback from Grid Access Provider 27
30
Verify Master data Metering Point
31
Report settlement basis per MGA
44
Balance responsible
Report settlement basis per MGA
46
Metering values
3. party
Query
Metering values(Mtr. read, Qty.,
Withdrw)
Feedback on Query (Customer,
MP Char, Portfolio)
Update 3. party access
33
43
40
34
Request to Elhub
29
Feedback from Elhub
30
Verify Master data Metering Point
31
Reminder, metering values
32
Producer
Update
Feedback from Elhub
Structure data, Master data, Metering values, Calculations
29
Update
Feedback from Grid Access Provider 28
Request to Elhub
26
Query
41
Metering values
42
Report settlement basis per MGA
45
Balance settlement responsible
Report structure data to
Settlement responsible
35
Report settlement basis per MGA
36
Report settlement basis per
neighbouring grid
37
NECS
Report produced volume
38
Report Elcert consumption
39
Oversikt over nye meldinger
Koblinger mellom eksisterende Edifact-meldinger og nye XML-meldinger
1/14/2015
17
Elhub versjon 1.0 innhold
Kraftleverandør
database
EDI/ebIX®
Elhub
• Markedsaktører
• Kundeinformasjon
• Markedsprosesser
• Målepunktinformasjon
• Markeds
prosesser
• Målepunktdatabase
• Måleverdier
• Markedsprosesser
• Avregningsunderlag
• Måleverdidatabase
• Strukturdata
Sluttbruker
EDI/ebIX®
Nettselskaper
database
• Nett-tariff
informasjon
(opsjon)
Målepunkt
Markedsaktører
Elhub
operatører
WEB
Kraftleverandører
WEB
WEB
Firma og brukeradm.
KPI monitorering
Markedsprosesser
Rapportering
Rapportering
Statistikk
Åpeninformasjon
Elhub
Web portal
WEB
Åpen
WEB
Autorisering
KPI Monitorering
Prosess adm.
Feilhåndtering
Rapportering/Statistikk
konfigurering
Elhub adm.
Sluttbruker
Offentlige
etater
Måleverdier
Tilgangsfullmakter
• Vedlikeholde strukturdata og relasjoner
Markedsprosesser
Grunndata
B2B
Netteiere
Markedsprosesser
Måleverdier og
- leverandørskifte, Inn- og utflytting osv.
Måleverdier og
aggregerte data
aggregerte data
B2B
Balanseansvarlige
Måleverdier
Måleverdier og
• Beregne nettområdetap, JIP og profilere
(Markedsprosesser)
aggregerte data
B2B
NBS
B2B
NECS
B2B
Markedsaktører
• Orkestrere markedsprosessene
B2B
• Motta, validere og distribuere måleverdier
Tredjeparter
Produsenter
B2B
B2B
• Rapportere underlag til NBS, NECS,
balanseansvarlige,
kraftleverandører/produsenter
Måleverdier
og
aggregerte data
Elhub
Aggregerte data
• Avviksberegning (korreksjoner)
Adresseregister
Markedsaktører
WEB
Sertifisering, Ediel portalen
Oversikt over en typisk daglig prosess
relatert til måleverdier og rapportering
Måleverdier
Timemålte
Måleverdier
Profilavregnet
Måleverdiansvarlig
Purringer
VEE
(Nettselskap)
RapporterKvalitet - KPI
Elhub Portal
Sjekk og
lagring
Elhub
Rapportermåleverdier
Rapportertotalvolum
Kalkuleringer, JIP, profilering og
tapsberegninger
Aggregert
volum
Timeverdier
tilgjengelig
B2B Meldinger/
Abonnement
Underlag
NBS
Agg. volum
MGA/aktør
D+2-12
D+13
Nettselskap
Kraftleverandør
3.Part
Balanseansvarlig
Produsenter
NBS
Tidsfrister kl.
07:00
09:00
10:00
12:00
Oppbygging - Dokumentasjon
• Business Requirement Spesification (BRS)
– Beskriver prosessen, roller, sekvenser, frister og informasjonselementer
1.1.1
BRS-NO-101
Start of supply - change of supplier
• Prosesskomponenter
RequestStartOfSupply
<?xml version="1.0" encoding="UTF-8"?>
<RequestStartOfSupply xmlns="un:unece:260:data:EEM" xmlns:xsi="http://www.w3.org/2001/XMLSchemainstance" xsi:schemaLocation="un:unece:260:data:EEM RequestStartOfSupply_10A.xsd">
<Header>
<Identification>1234567890</Identification>
<DocumentType listAgencyIdentifier="6">392</DocumentType>
<Creation>2014-06-11T09:30:47Z</Creation>
<SenderEnergyParty>
<Identification schemeAgencyIdentifier="9">1234567890123</Identification>
</SenderEnergyParty>
<RecipientEnergyParty>
<Identification schemeAgencyIdentifier="9">9876543210123</Identification>
</RecipientEnergyParty>
</Header>
<ProcessEnergyContext>
<EnergyBusinessProcess listAgencyIdentifier="260">E65</EnergyBusinessProcess>
<EnergyBusinessProcessRole listAgencyIdentifier="6">DDQ</EnergyBusinessProcessRole>
<EnergyIndustryClassification>23</EnergyIndustryClassification>
</ProcessEnergyContext>
<PayloadMPEvent>
<StartOfOccurence>2014-06-13T09:00:00Z</StartOfOccurence>
<MeteringPointUsedDomainLocation>
<Identification schemeAgencyIdentifier="9">707057500022939815</Identification>
</MeteringPointUsedDomainLocation>
<BalanceResponsible_Involved>
<Identification schemeAgencyIdentifier="9">1111111111119</Identification>
</BalanceResponsible_Involved>
<BalanceSupplier_Involved>
<Identification schemeAgencyIdentifier="9">2222222222229</Identification>
</BalanceSupplier_Involved>
<ConsumerInvolvedCustomerParty>
<Identification schemeAgencyIdentifier="82">987123456</Identification>
<Name>The Company ASA</Name>
<NACE_DivisionCode>7201.01</NACE_DivisionCode>
</ConsumerInvolvedCustomerParty>
<ConsumerInvolvedCustomerAddress>
<Address>
<StreetName>Storgt.</StreetName>
<BuildingNumber>12</BuildingNumber>
<Postcode>5001</Postcode>
<CityName>BERGEN</CityName>
<CountryCode schemeAgencyIdentifier="ISO3166-1:Alpha2">NO</CountryCode>
</Address>
<PostalAddress>
<PostOfficeBox>Postboks 1239, Sentrum</PostOfficeBox>
</PostalAddress>
<Communication>
<CommunicationChannel>email</CommunicationChannel>
<CompleteNumber>ole.olsen@company.no</CompleteNumber>
</Communication>
</ConsumerInvolvedCustomerAddress>
</PayloadMPEvent>
</RequestStartOfSupply>
– Meldinger (logiske) som utveksles mellom Elhub og markedsaktørene
– Refereres i BRS’ene
Start of Supply (Change of Supplier,
Move In, Cancellation, Rollback)
1
• XML Meldinger og XSD skjema
– XML: Meldingssyntaks
– XSD: Beskriver oppbygging av melding
14.01.2015
21
Elhub versjon, endringer
• Innsamling og VEE
• Tidsfrister
• Informasjonsmodell
• Oppgaveoverføring
– MGA tap og JIP
– Underlag til Balanseavregning
EDI/ebIX®
Nettselskaper
• Målepunktinformasjon
• Måleverdier
• Markedsprosesser
database
• Nett-tariff
informasjon
(opsjon)
– Avviksunderlag
– Rapportering til NBS, NECS, BA, KL
• Arbeidsprosess-støtte
– Web Portal støtte
– KPI rapporter
• Nøytralitet
Målepunkt
Elhub, detaljerte endringer
Kraftleverandør
EDI/ebIX®
• Kundeinformasjon
• Markeds
prosesser
database
• Avregningsunderlag
• Elhub som part
• Harmonisering
• Avregningsunderlag
• Tidsfrister
• Informasjonsmodell
• Sluttbrukers tilgang
Sluttbruker
• Web Plug-in
• 3. parts tjenester
• Nøytralitet
Eksisterende prosesser
Endring av oppgaver
Elhub
Mere automatisering
Nye prosesser
Elhub Prosjektet
Støtte - Avklaring
Nytt meldingsformat
En ting er sikkert: Endringer blir det!
Aktørenes
KIS/CAD
systemer
Aktørenes
ansvar
Endringer!
Endringer
Nye
funksjoner
Prosesser
Systemer
Organisasjon
Systemleverandører
Men også
FORENKLINGER
14.01.2015
Spørreundersøkelse om
selskapenes forberedelser
14.01.2015
Bunntekst
25
224 svar mottatt (av ca 380 utsendte)
• 123 nettselskaper
• 101 kraftselskaper
2/3 av selskapene er vertikalintegrerte
Halvparten av selskapene er med i en samarbeidskonstellasjon
Status forberedelser til innføring av Elhub
• Alle har definert kontaktpersoner for Elhub
• ~40% har etablert eget Elhub-prosjekt
• ~25% har estimert ressursbehov internt
• ~30% har inngått avtale med systemleverandører om bistand
for tilpasning til Elhub
• ~30% har startet å spesifisere hvilke endringer som må gjøres
• ~75% har gjennomført aktiviteter for datakvalitet
• ~80% av aktørene planlegger å involvere systemleverandør i
datavask
Utvalgte utfordringer vedrørende datavask
• Manglende opplysninger på eldre anlegg
• Innsamling av fødselsnr
• Inndeling navn/etternavn
• Manglende krav/retningslinjer for datainnhold og datakvalitet
• Utydelig kravspesifikasjon
• Mye manuell jobb
Informasjon fra Elhub
• 65% fornøyd med generell info
• 57% fornøyd med info om tidsplaner
• 38% fornøyd med info om krav til endringer
• 42% vet hva som forventes av endringer
Hva må nett- og kraftselskapene gjøre
for å forberede seg for Elhub?
14.01.2015
Bunntekst
34
Overordnede GO-LIVE-kriterier for hver aktør
Aktør testet og godkjent i
Elhub
Data migrert til Elhub
• Hele dataporteføljen er migrert til
Elhub
• Datakvalitet er i henhold til Elhubs
krav
• Aktørs system oppgradert
• Aktør sertifisert i Ediel-portalen
• Aktør godkjent i Elhub
• Aktør har innført nye
forretningsprosesser og
gjennomført intern opplæring
TEST
Aktør
klar for
Elhub
MIGRERING
Eskpertgruppe for test og migrering
• Oppstart høst 2014
• Utpekt av bransjeorganisasjonene
• Representativt utvalg av kraft og nett-selskaper. Inkluderer nå
også de viktigste systemleverandørene
• Skal bidra i å utarbeide strategier og prosesser samt spesifisere
tekniske løsninger for test og migrering
• Skal bidra til å etablere og teste ut løsning og metodikk i praksis
(via pilotaktører)
14.01.2015
Bunntekst
36
Datamigrering
Ansvarsfordeling – migrering
Elhub-prosjektet er ansvarlig for å
Markedsaktørene er ansvarlig for å
– Etablere overordnede planer for
Elhub migrering
– Etablere planer for datavask og
migrering
– Definere krav til datainnhold,
datakvalitet og filformat for migrering
– Gjennomføre datavask på egne data i
henhold til Statnetts krav
– Etablere og drifte sentral
migreringsplattform (DAM)
– Migrere data til DAM i henhold til
Statnetts planer
Prinsipiell teknisk infrastruktur for migrering
Front
end
DAM
Kraftleverandør Periodisk kjøring
Validation
Nettselskap
Migr.
DB
Elhub
migr.
Elhub
DB
Migreringsfiler
• 5 filtyper:
– Customer, Metering Point, Contracts, Metering value, Formula
• Hver fil består av datasett i form av rader.
– En rad, ett datasett. En tidsperiode, ett datasett. Ett målepunkt eller
kunde, ett datasett
• Filformat v0.9 vil bli tilgjengeliggjort på elhub.no i
januar/februar
Noen begreper
• Tre kategorier av datasett:
– Innledende datasett: Datasett som ikke tidligere er sendt inn
– Kompletterende: Data som kompletterer tidligere innsendte datasett.
F.eks. oppdaterte måleverdier
– Korrigerende: Datasett som er endret siden tidligere innsending og som
overskriver tidligere innsendte datasett. F.eks. Data som feilet i forrige
innsending. Rettinger i historiske måledata
• Delmengder av data
– Fullt datamengde: Hele porteføljen av datasett på et gitt tidspunkt
– Delta datamengde: Datasett som er endret eller som kommer i tillegg
Utkast overordnet innsendingsprosess
• Overordnet prinsipp: Aktørene starter å sende inn data så tidlig som mulig (så fort
DAM er tilgjengelig, tentativt fra desember 2015) og fortsetter å sende inn
kompletterende data i iterasjoner frem til Go-Live
• Aktørene kan starte med å sende inn en delmengde av data som kompletteres etter
hvert, inntil de har sendt inn hele porteføljen
• For store aktører ønsker Elhub å kun motta delta datamengde (endringer og tillegg)
– Migreringsdatabasen bygger seg gradvis opp
– Risiko reduseres ved at det ikke er behov for store dataoverføringer rett før Go-Live og ved
at data kvalitetssikres kontinuerlig fra et tidlig tidspunkt
• Små aktører tillates å sende inn fullt datasett (dvs hele porteføljen) flere ganger.
DAM vil da analysere hva som er endret siden forrige innsending og kun prosessere
dette
• Innsendingsfrekvens:
– Små aktører med få feil: Hele porteføljen, månedlig
– Store aktører: Kompletterende og korrigerende datasett, ukentlig
– Små aktører med mange feil: Korrigerende datasett, ukentlig inntil antall feil er redusert
Prosessering og validering av innkommende data
• Automatisk prosessering:
– Validering av filnavn
– Validering av syntaks
– Validering av relasjoner innad i samme datasett og innad i samme fil
• Batch-prosess:
– Validering av konsistens mellom data mottatt fra flere markedsaktører
• Markedsaktørene må rette data som er feilet og deretter sende
inn korrigerende data
– Feilrapporteringsfiler sendes ut fra DAM
Krav til datakvalitet for data
som skal migreres
Mottak av data fra kraft og nett
Elhub
Kraftleverandør
• Kunde
• Relasjon til
målepunkt
• Syntakskontroll
• Integritetskontroll
• Konsistenskontroll
•
•
•
•
Målepunkt
Måleverdier
Kunde
Relasjoner
Nettselskaper
database
database
Sluttbruker
Målepunkt
Nice-to-have versus must-have
• Data som er nødvendige for at Elhub skal virke MÅ være
kvalitetssikret før overføring til Elhub
• Data som skal sendes til Elhub som ikke er driftskritiske, men er
viktige for markedet, BØR være kvalitetssikret før overføring til
Elhub
• Data som skal sendes til Elhub som ikke er driftskritiske, men vil
bli viktige for markedet*, KAN være kvalitetssikret før
overføring til Elhub
*) Ref. leverandørsentrisk modell
Hva skal kvalitetssikres av markedsaktørene?
Markedsaktør
MÅ
BØR
KAN
Nett
• Målepunktinformasjon
• Måleverdier
• Kundeidentifikasjon
• Relasjoner
• Avgiftsinformasjon
• Målepunktadresse
• Kundeadresse
Kraft
• Kundeidentifikasjon
• Relasjoner
• Kundeadresse
• Avgiftsinformasjon
Hvilken kvalitetssikring skal gjøres?
MÅ
Fødselsnummer, evt. reell fødselsdato, evt. gyldig ID
for utenlandske kunder
-> Sjekkes mot folkeregisteret
Nett/Kraft
Organisasjonsnummer for bedriftskunder
-> Sjekkes mot Brønnøysund
NB: Elhub vil utarbeide retningslinjer for org. uten
org.nr.
Nett/Kraft
Relasjon mellom kunde og målepunkt
-> Kraft må sjekke mot Nubix
Nett/Kraft
Målepunktinformasjon
Nett
Anleggsadresse for fysiske målepunkt
-> Sjekkes mot Matrikkelen
BØR
Nett
Kontaktinformasjon og kundeadresse
Fjerne døde kunder
-> Sjekk mot folkeregisteret. Sjekk "unaturlige"
fødseldatoer
KAN
Kraft/Nett
Nett/Kraft*
*) Bør kvalitetssikres, men endring tillates gjennomført etter
skjønn og basert på forståelse av kunden.
Historikk på migrerte data
• Behov:
– Elhub trenger historikk på migrerte data for å støtte avviksoppgjør
tilbake i tid til 1. februar 2016 (tentativ dato for overgang til
nettavregningsområder)
• Hvilke felter skal historiseres
– Knytning mellom målepunkt og aktører, dvs. kraftleverandør,
balanseansvarlig, nettselskap og sluttbruker
– Målepunktinformasjon som avregningsmetode, avlesningsmetode,
status
– Måleverdiinformasjon som kvantitet, kvalitet, valideringskode,
estimeringskode, registreringsdato, startdato, tildato, kategori
Tentativ prosjektplan migrering
Q3 2014
Q1 2015
Start
migreringsprosjekt
Leverandør valgt
1/12 2015
1/2 2016
DataAnalyse- og Avlesning av
Migreringsverktøy profilferdig
avregnede
MP
Preliminær datavask
Pilotperiode
Sentral datavask
Inkrementell migrering
Fase 1
Fase 2
1/10 2016
Elhub
go-live
Test og sertifisering av aktører
som skal bruke Elhub
Ansvarsfordeling – test
Elhub-prosjektet er ansvarlig for å
Markedsaktørene er ansvarlig for å
– Etablere overordnede planer for
Elhub testing
– Etablere planer for egen utvikling og
enhetstesting
– Tilpasse Edielportalen for sertifisering
mot Elhub
– Tilpasse egne systemer for Elhub
– Gjennomføre systemtest av Elhubløsningen
– Gjennomføre test og sertifisering i
Edielportalen
– Planlegge aktørtest i Elhub og foreta
godkjenning av aktører
– Gjennomføre test og godkjenning mot
Elhub
– Gjennomføre akseptansetest av
Elhub-løsningen inkl. markedstest mot
utvalgte aktører
– Endre egne forretningsprosesser og
gjennomføre intern opplæring
Elhub testprosjekt
• Omfang av Elhub testprosjekt
– Test av Elhub løsning
– Aktørtest mot Kraftleverandører og Nettselskaper
– Test av informasjonsutveksling mot andre eksterne aktører
• Aktørtest innebærer å sjekke
– At Nettselskaper og Kraftleverandører har tilpasset sine systemer i
henhold til kravene fra Elhub
– At markedsprosesser og informasjonsutveksling mellom Aktørene og
Elhub fungerer som forventet
Systemtilpasning av aktørens KIS og MVS er en
forutsetning for testaktivitetene mot Elhub
Tentativ tidsplan for tester som aktører deltar i
1/1 2016
1/7 2015
Edielportalen
ferdig utviklet
Sertifisering Systemer
1/5 2016
1/4 2016
Alle systemer Alle aktører
Alle aktører
er sertifisert har oppgradert er sertifisert
I Edielportalen systemene
i Ediel-portalen
Edielportalen
15/9 2016
Alle aktører
godkjent i Elhub
Sertifisering Aktører
Elhub Testmiljø
Inkludert piloter
Integrasjonstest /
test av Systemer
Miljø vil avklares
med valgt leverandør
Elhub Pre-prodmiljø
Alle
Utvalgte
Godkjenning Aktører
Deltakelse i Elhub-test
Oppfølging av aktørene –
milepæler for test og migrering
Definisjon av milepæler for aktørene
• For å sikre at alle 200+ aktørene er klare for overgang til Elhub på spesifisert
dato vil Statnett, i samråd med ekspertgruppen og NVE, definere
delmilepæler som alle aktørene må passere
• Milepælene skal være tydelige, målbare og realistiske, og de skal bidra til å
sikre at aktørene kommer tidlig i gang med arbeidet og holder en jevn
progresjon
• Ved hver milepæl skal aktør rapportere status til Statnett/NVE. Antall
milepæler må være håndterlig
• Milepælene for aktørene må koordineres med planene i Elhub-prosjektet og
systemleverandørenes planer
• Det kan være aktuelt for NVE å ilegge aktøren foretaksbot dersom enkelte
av milepælene ikke blir oppnådd
– I forslag til endring av forskrift 301 åpner NVE for at de kan pålegge aktørene å
kvalitetssikre og migrere data innen gitte frister
Utkast til milepælsplan – Test og Migrering
1.4.16
Aktørs
Aktør
system er sertifisert i
oppgradert
Edielportalen
Test
Migrering
1.5.16
1.6.15
1.10.15
Datakvalitetsrapport 1
Datakvalitetsrapport 2
1.11.15 1.2.16
InfraDatastruktur migrering
etablert
1
1.4.16
15.9.16
Aktør
godkjent i
Elhub
1.7.16
1.9.16
DataDataDatamigrering migrering migrering
3
2
4
Et utvalg av disse vil brukes av NVE i forhold til oppfølging av aktørene
Mulig go-live prosess
Start siste
migrering til Elhub
Frys
markedsprosesser
Siste frist for
migrering av data
til DAM
Go Live: Åpne opp
markedsprosesser
mot Elhub
Market Parties
migrations to
DAM (delta)
Migrate from
DAM to Elhub
Market Parties
migrate to DAM
(delta)
Migrate from DAM to
Elhub (delta)
Market Parties Cut
Over to Elhub
Oppsummering
Oppsummering – viktigste fokusområder for
bransjen
• 2015
– Etablere prosjekt for tilpasning til Elhub og migrering av data
– Gjennomføre datavask på egne data
– Inngå avtale med systemleverandør om tilpasning til Elhub
– Planlegge datamigrering
– Planlegge systemoppgradering
• H1 2016
– Starte datamigrering
– Gjennomføre systemoppgradering
– Sertifisere seg i Ediel-portalen
• H2 2016
– Fullføre datamigrering
– Teste mot Elhub
– Implementere nye markedsprosesser, inkl intern opplæring
– Go-Live
Spørsmål og svar…
14.01.2015
61