<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=Windows-1252">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0cm;
font-size:11.0pt;
font-family:"Calibri",sans-serif;}
p.xmsonormal, li.xmsonormal, div.xmsonormal
{mso-style-name:x_msonormal;
margin:0cm;
font-size:10.0pt;
font-family:"Calibri",sans-serif;}
p.xxmsonormal, li.xxmsonormal, div.xxmsonormal
{mso-style-name:x_xmsonormal;
margin:0cm;
font-size:11.0pt;
font-family:"Calibri",sans-serif;}
span.EmailStyle24
{mso-style-type:personal-reply;
font-family:"Calibri",sans-serif;
color:windowtext;}
.MsoChpDefault
{mso-style-type:export-only;
font-size:10.0pt;
mso-ligatures:none;}
@page WordSection1
{size:612.0pt 792.0pt;
margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="en-BE" link="blue" vlink="purple" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal"><span lang="NL" style="mso-fareast-language:EN-US">Je mag doorsturen vanaf revisie
</span>718111 <span lang="NL">(inclusief)</span><span lang="NL" style="mso-fareast-language:EN-US"><o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal" style="margin-bottom:12.0pt"><b><span style="font-size:12.0pt;color:black">From:
</span></b><span style="font-size:12.0pt;color:black">De Blende Christophe <christophe.deblende@vlaanderen.be><br>
<b>Date: </b>Friday, 14 July 2023 at 10:09<br>
<b>To: </b>Schampheleer Willem <willem.schampheleer@vlaanderen.be>, Van Lerbeirghe Veerle <veerle.vanlerbeirghe@vlaanderen.be><br>
<b>Cc: </b>phoenix@list.omgeving.vlaanderen.be <phoenix@list.omgeving.vlaanderen.be>, Bylemans Sander <sander.bylemans@vlaanderen.be>, Goedertier Stijn <stijn.goedertier@vlaanderen.be><br>
<b>Subject: </b>Re: DSI oefen<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">Dag Meneer Willem, <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">wij gebruiken de laatste data common lib, die zou aan zich die manifest files moeten genereren. Als dat niet meer zo is, ja is dat ons nooit gemeld geweest. En blijkbaar is dat zelfs geen issue,
want alles draait nog in productie. Misschien vandaar dat het ons nooit gemeld is geweest en dat hoeft ook niet als er geen breaking change is. Het is ergens interne keuken waar we niet direct iets van moeten weten.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">Ik denk dat jullie gewoon te veel ballen in de lucht houden en jullie proces robuuster moeten beginnen maken. Wij hebben in DSI sinds dag 1 steeds parquet files naar de data ingest gestuurd en
de boekhouding heeft altijd aangegeven dat alles goed doorgestuurd is en aangekomen is. Wat achter de data ingest gebeurt, hebben we weinig zicht op. Dat lijkt mij dan iets dat wij weinig bij kunnen helpen.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">Om <a id="OWAAM33289" href="mailto:veerle.vanlerbeirghe@vlaanderen.be">
<span style="font-family:"Calibri",sans-serif;text-decoration:none">@Van Lerbeirghe Veerle</span></a> verder te helpen om de mercator flow te testen, moeten wij de DWH volledig herladen? Ik zet de data ingest flow alvast af in oefen. Eens de opkuis in DWH gebeurd
is, kunnen we dan alles opnieuw sturen.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">Mvg<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:12.0pt;color:black">Christophe<o:p></o:p></span></p>
</div>
<div class="MsoNormal" align="center" style="text-align:center">
<hr size="0" width="100%" align="center">
</div>
<div id="divRplyFwdMsg">
<p class="MsoNormal"><b><span style="color:black">Van:</span></b><span style="color:black"> Schampheleer Willem <willem.schampheleer@vlaanderen.be><br>
<b>Verzonden:</b> vrijdag 14 juli 2023 9:07<br>
<b>Aan:</b> De Blende Christophe <christophe.deblende@vlaanderen.be><br>
<b>CC:</b> phoenix@list.omgeving.vlaanderen.be <phoenix@list.omgeving.vlaanderen.be>; Bylemans Sander <sander.bylemans@vlaanderen.be>; Goedertier Stijn <stijn.goedertier@vlaanderen.be>; Van Lerbeirghe Veerle <veerle.vanlerbeirghe@vlaanderen.be><br>
<b>Onderwerp:</b> Re: DSI oefen</span> <o:p></o:p></p>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
</div>
<div>
<div>
<p class="xmsonormal"><span lang="NL" style="font-size:11.0pt">Ik stel ook vast dat de zip files geen manifest bevatten. Controle op productie leert dat de laatste manifests zijn doorgestuurd op 10 maart 2023.</span><o:p></o:p></p>
<p class="xmsonormal"><span style="font-size:11.0pt"> </span><o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="xmsonormal" style="margin-bottom:12.0pt"><b><span style="font-size:12.0pt;color:black">From:
</span></b><span style="font-size:12.0pt;color:black">Schampheleer Willem <willem.schampheleer@vlaanderen.be><br>
<b>Date: </b>Thursday, 13 July 2023 at 17:41<br>
<b>To: </b>De Blende Christophe <christophe.deblende@vlaanderen.be><br>
<b>Cc: </b>phoenix@list.omgeving.vlaanderen.be <phoenix@list.omgeving.vlaanderen.be>, Bylemans Sander <sander.bylemans@vlaanderen.be>, Goedertier Stijn <stijn.goedertier@vlaanderen.be>, Van Lerbeirghe Veerle <veerle.vanlerbeirghe@vlaanderen.be><br>
<b>Subject: </b>Re: DSI oefen</span><o:p></o:p></p>
</div>
<p class="xmsonormal"><span lang="NL" style="font-size:11.0pt">Ik heb de logs nagekeken: NiFi heeft nergens de file met revisie
</span>718111<span lang="NL"> opgepikt. </span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL">NiFi kan ‘de revisie dan ook niet verwijderd hebben’.
</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL">De revisie is ook niet terug te vinden op de data ingest.</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL"> </span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL">Als ik kijk naar de eerstvolgende files die klaar staan om verwerkt te worden dan zie ik dit:</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL"> </span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL" style="font-size:11.0pt">2023-07-10T16_47_46.896772.zip -> revisions_3.2.23_00000000000000718113_00000000000000718113.parquet</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="EN-US" style="font-size:11.0pt">2023-07-10T16_48_26.886061222.zip -> revisions_3.2.23_00000000000000718115_00000000000000718116.parquet</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="EN-US" style="font-size:11.0pt">…</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="EN-US" style="font-size:11.0pt">2023-07-10T16_49_46.294852183.zip -> revisions_3.2.23_00000000000000718118_00000000000000718118.parquet</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="EN-US" style="font-size:11.0pt">2023-07-10T16_50_27.234836348.zip -> revisions_3.2.23_00000000000000718120_00000000000000718120.parquet</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="EN-US" style="font-size:11.0pt"> </span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL-BE" style="font-size:11.0pt">Ook hier zitten gaten tussen…</span><o:p></o:p></p>
<p class="xmsonormal"><span lang="NL-BE" style="font-size:11.0pt"> </span><o:p></o:p></p>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="xmsonormal" style="margin-bottom:12.0pt"><b><span style="font-size:12.0pt;color:black">From:
</span></b><span style="font-size:12.0pt;color:black">De Blende Christophe <christophe.deblende@vlaanderen.be><br>
<b>Date: </b>Thursday, 13 July 2023 at 16:32<br>
<b>To: </b>Schampheleer Willem <willem.schampheleer@vlaanderen.be><br>
<b>Cc: </b>phoenix@list.omgeving.vlaanderen.be <phoenix@list.omgeving.vlaanderen.be>, Bylemans Sander <sander.bylemans@vlaanderen.be>, Goedertier Stijn <stijn.goedertier@vlaanderen.be>, Van Lerbeirghe Veerle <veerle.vanlerbeirghe@vlaanderen.be><br>
<b>Subject: </b>Re: DSI oefen</span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black">Dag Willem, </span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black">we hebben dit aan onze kant nagekeken en die revisie is goed doorgestuurd naar de ingest. Dus ik vermoed dat dit een revisie is die verloren gegaan is door de NIFI flow. Misschien moet die aangepast
worden dat de revisie pas verwijderd wordt als die ook volledig correct verwerkt is geweest. Ipv te vertrouwen op NIFI.</span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black"> </span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black">Mvg</span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black">Christophe</span><o:p></o:p></p>
</div>
<div>
<p class="xmsonormal"><span style="font-size:12.0pt;color:black"> </span><o:p></o:p></p>
</div>
<div class="MsoNormal" align="center" style="text-align:center">
<hr size="0" width="100%" align="center">
</div>
<div id="x_divRplyFwdMsg">
<p class="xmsonormal"><b><span style="font-size:11.0pt;color:black">Van:</span></b><span style="font-size:11.0pt;color:black"> Schampheleer Willem <willem.schampheleer@vlaanderen.be><br>
<b>Verzonden:</b> donderdag 13 juli 2023 14:30<br>
<b>Aan:</b> De Blende Christophe <christophe.deblende@vlaanderen.be><br>
<b>Onderwerp:</b> DSI oefen</span><span style="font-size:11.0pt"> </span><o:p></o:p></p>
<div>
<p class="xmsonormal"><span style="font-size:11.0pt"> </span><o:p></o:p></p>
</div>
</div>
<div>
<div>
<p class="xxmsonormal"><span lang="NL">De flow is stilgevallen omdat </span>revisie 718111 ontbreekt<o:p></o:p></p>
</div>
</div>
</div>
</div>
</div>
</body>
</html>