tag:status.romarg.com,2005:/historyROMARG Status - Incident History2024-03-29T07:22:59+02:00ROMARGtag:status.romarg.com,2005:Incident/199106092024-02-05T17:26:11+02:002024-02-06T20:25:38+02:00Functionare cu intermitenta a serviciilor<p><small>Feb <var data-var='date'> 5</var>, <var data-var='time'>17:26</var> EET</small><br><strong>Resolved</strong> - In ultimele ore am monitorizat serviciile si totul functioneaza in parametri de performanta corespunzatori. Consideram acest incident rezolvat. Va multumim pentru rabdare.</p><p><small>Feb <var data-var='date'> 5</var>, <var data-var='time'>12:05</var> EET</small><br><strong>Monitoring</strong> - Situatia a fost remediata, serviciile sunt functionale si stabile. Ne pare rau pentru neplacerile cauzate si va multumim pentru intelegere si rabdare.</p><p><small>Feb <var data-var='date'> 5</var>, <var data-var='time'>10:42</var> EET</small><br><strong>Investigating</strong> - Sistemele noastre de monitorizare au alertat cu privire la functionarea cu intermitenta a serviciilor. Investigam cauza si revenim cu un update pe masura ce avem noutati.</p>tag:status.romarg.com,2005:Incident/191775652023-11-20T17:50:45+02:002023-11-20T17:50:45+02:00Functionare intermitenta Spamexperts<p><small>Nov <var data-var='date'>20</var>, <var data-var='time'>17:50</var> EET</small><br><strong>Resolved</strong> - Inchidem acest incident. Livrarea email-urilor se realizeaza fara erori. <br /><br />Revenim cu detalii imediat ce primim explicatia celor de la Spamexperts.</p><p><small>Nov <var data-var='date'>20</var>, <var data-var='time'>12:40</var> EET</small><br><strong>Update</strong> - N-AbleĀ® Mail Assure and Spam Experts partenerii nostri au publicat pe pagina lor de status un update referitor la acest incident.<br /><br />https://uptime.n-able.com/event/191202/<br /><br />Revenim in momentul in care primim detalii concrete, despre cauzele acestui incident.</p><p><small>Nov <var data-var='date'>20</var>, <var data-var='time'>11:46</var> EET</small><br><strong>Monitoring</strong> - Functionarea gateway-ului Spamexperts a revenit la normal. Este posibil sa intampinatii unele intarzieri la trimiterea/primirea email-urilor in urmatoarele 60 de minute, este necesar sa se echilibreze si normalizeze fluxul de trimitere si primire.<br /><br />Monitorizam in continuare in asteptarea explicatiilor din partea partenerului Spamexperts.</p><p><small>Nov <var data-var='date'>20</var>, <var data-var='time'>11:29</var> EET</small><br><strong>Identified</strong> - Nu se confirma varianta atacului DDOS. Producatorul solutiei de filtrare antispam/antivirus Spamexperts au confirmat existenta unui bug software la nivelul platformei lor software.<br /><br />Inginerii lor lucreaza contra cronometru la remedierea lui. Intre timp email-urile au inceput sa fie livrate.<br /><br />Urmarim in continuare.</p><p><small>Nov <var data-var='date'>20</var>, <var data-var='time'>11:06</var> EET</small><br><strong>Investigating</strong> - Investigam o functionare intermitenta a gateway-ul SPAMEXPERTS in urma unui atac de tip DDOS.<br /><br />Revenim cu update.</p>tag:status.romarg.com,2005:Incident/190479912023-11-06T03:30:00+02:002023-11-07T19:04:51+02:00Network. Incident retea Data Center ROMARG (BV01)<p><small>Nov <var data-var='date'> 6</var>, <var data-var='time'>03:30</var> EET</small><br><strong>Resolved</strong> - In cursul zilei de 06.11.2023 incepand cu orele 15.28 sistemele de monitorizare ale ROMARG au detectat o functionare intermitenta cu intreruperi constante a accesului la internet pentru serverele aflate in data center-ul BV01 din Brasov, al ROMARG. <br /><br />Imediat dupa primele alerte echipa Service Delivery a fost dispecerata intervenind in data center pentru investigarea cauzelor acestui incident. A fost identificata rapid o congestie la nivelul switch-urilor de distributie. Congestia fiind determinata de un alt incident aparut pe un segment de retea de distributie din data center.<br /><br />Au fost aplicate masurile corective necesare pentru rezolvarea simultana a celor doua probleme.<br /><br />Dupa remedierea acestor probleme alertele au disparut iar serverele au inceput sa redevina acesibile fara pierderi de trafic, echipa de Service Delivery a confirmat la final rezolvarea problemelor pentru toti clientii afectati.<br /><br />Incidentul a fost in considerat inchis pentru toti clientii la ora 16.45.<br /><br />Ulterior, pe parcursul ultimelor 24 de ore, sistemele afectate au fost monitorizare atent fiind aplicate masuri preventive pentru a izola si preveni pe viitor situatii similare.<br /><br />Ne pare rau pentru neplacerile cauzate de acest incident.</p>tag:status.romarg.com,2005:Incident/162040282023-04-28T19:24:02+03:002023-04-28T19:24:02+03:00Lucrare mentenanta telefonie<p><small>Apr <var data-var='date'>28</var>, <var data-var='time'>19:24</var> EEST</small><br><strong>Resolved</strong> - This incident has been resolved.</p><p><small>Feb <var data-var='date'>20</var>, <var data-var='time'>10:23</var> EET</small><br><strong>Investigating</strong> - In perioada 20.02 - 28.02.2023 realizam lucrari de mentenanta la centrala telefonica. In aceasta perioada pentru a intra in legatura cu unul din consultantii ROMARG va rugam sa accesati pagina https://www.romarg.ro/contact</p>tag:status.romarg.com,2005:Incident/169709912023-04-27T14:00:30+03:002023-04-28T19:08:07+03:00Functionare cu intermitenta a serviciilor<p><small>Apr <var data-var='date'>27</var>, <var data-var='time'>14:00</var> EEST</small><br><strong>Resolved</strong> - In ultimele ore am monitorizat serviciile si totul functioneaza in parametri de performanta corespunzatori. Ne pare rau pentru neplacerile cauzate si va multumim pentru rabdare si intelegere.<br /><br />Platforma de suport a redevenit disponibila si poate fi accesata la adresa: https://support.romarg.com/ro<br /><br />Lucram intens sa preluam cu promptitudine toate solicitarile inregistrate, insa din cauza unui flux ridicat de clienti care ne-au contactat in ultimele ore, este posibil sa primiti raspuns intr-un timp mai indelungat de asteptare decat cel standard (maxim 30 de minute). <br /><br />Revenim cel tarziu maine, 28 Aprilie, cu un rezumat al incidentului si masurile pe care le vom implementa pentru a evita pe viitor asemenea incidente.</p><p><small>Apr <var data-var='date'>27</var>, <var data-var='time'>10:47</var> EEST</small><br><strong>Monitoring</strong> - Catre toti partenerii nostri: <br /><br />In primul rand, va multumim pentru rabdarea si intelegerea de care ati dat dovada in tot acest timp, stim ca aceasta situatie v-a creat neplaceri si ne pare rau pentru acest lucru. Serviciile sunt functionale, echipa tehnica a lucrat constant inclusiv pe parcursul noptii pentru restabilirea lor.<br /><br />In prezent, este o prioritate pentru noi sa asiguram disponibilitatea platformei de suport pentru a raspunde punctual solicitarilor.<br /><br />Continuam sa publicam pe aceasta pagina noi informatii pe masura ce sunt confirmate de echipa tehnica. <br />Din nou, va multumim pentru rabdarea si increderea acordata.</p><p><small>Apr <var data-var='date'>26</var>, <var data-var='time'>20:55</var> EEST</small><br><strong>Update</strong> - [UPDATE] Continuam sa investigam situatia aparuta la nivelul serviciilor. Va asiguram ca depunem toate eforturile pentru restabilirea accesului la servicii cat mai curand posibil, nefiind vorba despre o pierdere de date sau de o activitate malitioasa. De indata ce avem noi informatii vom reveni cu update.</p><p><small>Apr <var data-var='date'>26</var>, <var data-var='time'>14:17</var> EEST</small><br><strong>Investigating</strong> - Sistemele noastre de monitorizare au alertat cu privire la functionarea ingreunata pentru o parte din servicii. Investigam cauza revenim cu un update pe masura ce avem noutati.</p>tag:status.romarg.com,2005:Incident/110403692022-09-04T19:35:09+03:002022-09-04T19:35:09+03:00Lucrare Extinsa backup-uri Acronis<p><small>Sep <var data-var='date'> 4</var>, <var data-var='time'>19:35</var> EEST</small><br><strong>Completed</strong> - Am reusit sa finalizam lucrarea de mentenanta intr-un timp record, functionalitatea Acronis fiind restabilita pe toate serverele ramase. Va rugam sa ne contactati la support@romarg.com daca sesizati probleme de functionare / utilizare Acronis.</p><p><small>Sep <var data-var='date'> 2</var>, <var data-var='time'>15:31</var> EEST</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Sep <var data-var='date'> 2</var>, <var data-var='time'>15:19</var> EEST</small><br><strong>Scheduled</strong> - Continuam lucrarea de mentenanta inceputa in data 01 Septembrie , extinzand lucrarile catre serverele virtuale si dedicate pe care le avem in administrare.<br /><br />Estimam de asemenea timp de intrerupere medii de pana la 20 de minute per server.<br /><br />De asemenea, vor fi afectate de aceasta lucrare si cateva din serverele shared pentru care nu am reusit sa realizam reboot-ul lor (restart).<br /><br />Avand in vedere numarul foarte mare de servere pe care avem in administra estimam ca aceasta lucrare se va intinde pe urmatoarele 4-6 zile.<br /><br />Vom reveni cu update-uri periodice.</p>tag:status.romarg.com,2005:Incident/110315042022-09-01T22:23:22+03:002022-09-01T22:23:22+03:00Problema acces backup-uri Acronis<p><small>Sep <var data-var='date'> 1</var>, <var data-var='time'>22:23</var> EEST</small><br><strong>Completed</strong> - Lucrarea de mentenanta a fost finalizata, functionalitatea Acronis fiind restabilita pe toate serverele shared.</p><p><small>Sep <var data-var='date'> 1</var>, <var data-var='time'>14:29</var> EEST</small><br><strong>Update</strong> - Revizuim termenul de intrerupere a serviciilor per server la 15-20 minute. Sunt necesare si alte actualizari decat cele anticipate initial.</p><p><small>Sep <var data-var='date'> 1</var>, <var data-var='time'>11:45</var> EEST</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Sep <var data-var='date'> 1</var>, <var data-var='time'>11:42</var> EEST</small><br><strong>Scheduled</strong> - Un update realizat de Acronis in ultimele zile a determinat blocarea accesul la copiile de siguranta atat pentru clientii cat si pentru administratorii ROMARG. <br /><br />Pentru a rezolva aceste probleme este necesara reinstalarea agentului Acronis dar pentru a finaliza cu succes aceasta operatiune este necesar ca pe anumite servere sa intrerupem pentru cateva minute functionarea serviciilor. Intreruperea este necesara pentru actualizarea unor compomente ce presupun repornirea serverului.<br /><br />Estimam in timp de maxim de intrerupere per server de 5 minute. Va multumim pentru intelegere.</p>tag:status.romarg.com,2005:Incident/110176242022-08-31T11:11:33+03:002022-08-31T11:11:34+03:00Cluster Spamexperts<p><small>Aug <var data-var='date'>31</var>, <var data-var='time'>11:11</var> EEST</small><br><strong>Completed</strong> - Lucrare de mentenanta si inlocuire a serverelor Spamexperts a fost finalizata. <br />Daca intampinati probleme cu livrarea email-urilor va rugam sa ne contactati la support@romarg.com</p><p><small>Aug <var data-var='date'>30</var>, <var data-var='time'>15:46</var> EEST</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Aug <var data-var='date'>30</var>, <var data-var='time'>15:36</var> EEST</small><br><strong>Scheduled</strong> - Am inceput o lucrare de mentenenta pentru inlocuirea cluster-ului spamexperts. Va rugam sa aveti in vedere ca este posibil ca in urmatoarele 12-24 sa existe intarzieri sau probleme de livrare a email-urilor.<br /><br />Va rugam sa adresati orice sesizare in legatura trimiterea/primirea email-urilor in scris la adresa support@romarg.com</p>tag:status.romarg.com,2005:Incident/110104412022-08-29T20:45:58+03:002022-08-29T20:45:58+03:00Probleme de conectivate.<p><small>Aug <var data-var='date'>29</var>, <var data-var='time'>20:45</var> EEST</small><br><strong>Resolved</strong> - In ultimele ore am monitorizat serviciile si totul functioneaza in parametri de performanta corespunzatori. Consideram acest incident rezolvat. Revenim cat mai curand posibil cu detaliile tehnice despre acest incident. Ne pare rau pentru neplacerile cauzate si va multumim pentru intelegere.</p><p><small>Aug <var data-var='date'>29</var>, <var data-var='time'>16:53</var> EEST</small><br><strong>Monitoring</strong> - Am aplicat o solutie pentru remedierea situatiei, serviciile redevenind stabile. Continuam sa monitorizam serviciile, astfel incat sa ne asiguram ca totul este in regula.</p><p><small>Aug <var data-var='date'>29</var>, <var data-var='time'>16:53</var> EEST</small><br><strong>Update</strong> - We are continuing to work on a fix for this issue.</p><p><small>Aug <var data-var='date'>29</var>, <var data-var='time'>16:38</var> EEST</small><br><strong>Identified</strong> - Am identificat sursa problemei si lucram la rezolvarea ei. Revenim cu update de indata ce serviciile functioneaza in parametri normali.</p><p><small>Aug <var data-var='date'>29</var>, <var data-var='time'>16:35</var> EEST</small><br><strong>Investigating</strong> - Sistemele noastre de monitorizare au alertat cu privire la functionarea ingreunata a serviciilor. Investigam cauza si revenim cu un update pe masura ce avem noutati.</p>tag:status.romarg.com,2005:Incident/108891222022-08-23T16:37:21+03:002022-08-23T16:37:21+03:00Upgrade Spamexperts<p><small>Aug <var data-var='date'>23</var>, <var data-var='time'>16:37</var> EEST</small><br><strong>Completed</strong> - Lucrarea de mentenanta a fost finalizata. Interfata de administrare Spamexperts este din nou functionala</p><p><small>Aug <var data-var='date'>23</var>, <var data-var='time'>09:28</var> EEST</small><br><strong>Scheduled</strong> - Incepand cu ora 09.30 are loc o lucrare mentenanta asupra filter01. Pe perioada lucrarii, accesul in panoul de adminstrare Spamexperts va fi limitat. Nu asteptam intreruperi in procesarea email-urilor.<br /><br />Downtime estimat 60 - 90 de minute.</p>tag:status.romarg.com,2005:Incident/100285492022-05-19T19:31:52+03:002022-05-19T19:31:52+03:00Functionare cu intermitenta a serviciilor<p><small>May <var data-var='date'>19</var>, <var data-var='time'>19:31</var> EEST</small><br><strong>Resolved</strong> - In ultimele 3 ore am monitorizat serviciile si totul functioneaza in parametri de performanta corespunzatori. Consideram acest incident rezolvat. Ne pare rau pentru neplacerile cauzate si va multumim pentru intelegere.</p><p><small>May <var data-var='date'>19</var>, <var data-var='time'>16:17</var> EEST</small><br><strong>Monitoring</strong> - Am aplicat o solutie pentru remedierea situatiei, serviciile redevenind stabile. Continuam sa monitorizam serviciile, astfel incat sa ne asiguram ca totul este in regula.</p><p><small>May <var data-var='date'>19</var>, <var data-var='time'>15:39</var> EEST</small><br><strong>Investigating</strong> - Sistemele noastre de monitorizare au alertat cu privire la functionarea ingreunata a serviciilor. Investigam cauza revenim cu un update pe masura ce avem noutati.</p>tag:status.romarg.com,2005:Incident/93233502022-02-16T16:30:29+02:002022-02-16T16:30:29+02:00Lucrare mentenanta circuite interne data center<p><small>Feb <var data-var='date'>16</var>, <var data-var='time'>16:30</var> EET</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Feb <var data-var='date'>15</var>, <var data-var='time'>16:30</var> EET</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Feb <var data-var='date'>15</var>, <var data-var='time'>16:06</var> EET</small><br><strong>Scheduled</strong> - Pentru a rezolva definitiv cauzele incidentului de astazi 15.02.2022 am programat o lucrare de mentenanta in regim de urgenta ce vizeaza lucrari la nivelul echipamentelor de retea aflate in data centerul nostru.<br /><br />Lucrarea se va realiza etapizat pe parcursul urmatelor 24 ore.<br /><br />Incepe in: 15.02.2022 ora 16.30<br />Se termina in: 16.02.2022 ora 16.30<br /><br />In acest interval serviciile furnizate pot fi afectate de scurte intreruperi. Estimam un timp maxim cumulat de intrerupere potentiala de 30 de minute.<br /><br />Va multumim pentru intelegere.</p>tag:status.romarg.com,2005:Incident/89023922021-12-22T12:28:54+02:002021-12-22T13:34:16+02:00DNS Error<p><small>Dec <var data-var='date'>22</var>, <var data-var='time'>12:28</var> EET</small><br><strong>Resolved</strong> - Consideram incidentul rezolvat. In perioada de monitorizare nu au mai fost probleme.</p><p><small>Dec <var data-var='date'>21</var>, <var data-var='time'>12:57</var> EET</small><br><strong>Investigating</strong> - Intampinam probleme de stabililitate a serverelor DNS ca urmare a unui atac de tip Flood/DDOS impotriva lor.<br />Lucram la minimizarea efectelor.</p>tag:status.romarg.com,2005:Incident/64959182021-03-10T00:00:00+02:002021-03-10T12:34:33+02:00Functionare partiala - Atac DDOS<p><small>Mar <var data-var='date'>10</var>, <var data-var='time'>00:00</var> EET</small><br><strong>Resolved</strong> - In cursul noptii de 09 spre 10 Martie, incepand cu orele 00:24 AM mai multe valuri de atacuri DDOS distribuite au targetat simultan cateva sute de servere din data centerul ROMARG.<br /><br />Desi s-a intervenit instantaneu, sistemele noastre automate au preluat atacul si au inceput mitigarea, magnitudinea lui a necesitat inteventia umana pentru a-l bloca complet.<br /><br />Atacul a fost mitigat complet in jurul orei 02:00 AM serviciile revenind la functionarea normala. Atacul a continuat pana in jurul orelor 04.30 dimineata.<br /><br />Lucram impreuna cu furnizorii nostri pentru a identifica solutii ca acest de atacuri sa nu mai impacteze infrastructura noastra.</p>tag:status.romarg.com,2005:Incident/61160202021-01-26T18:34:50+02:002021-01-26T19:28:03+02:00Probleme de functionare la nivelul serverelor DNS<p><small>Jan <var data-var='date'>26</var>, <var data-var='time'>18:34</var> EET</small><br><strong>Resolved</strong> - In urma investigatiilor si interventiilor din ultimele ore consideram acest incident rezolvat.<br />Toate serviciile sunt din nou functionale. Vom reveni cu detalii suplimentare in scurta vreme.<br /><br />ECHIPA ROMARG</p><p><small>Jan <var data-var='date'>26</var>, <var data-var='time'>10:34</var> EET</small><br><strong>Investigating</strong> - In prezent ne confruntam cu un atac de tip DDOS la nivelul serverelor DNS. Specialistii nostri au intervenit din primele momente pentru remedierea acesteia. Ne pare rau pentru incoveniente. Depunem toate eforturile pentru o rezolvare cat mai rapida. Vom reveni cu update de indata ce vom reusi sa restabilim functionarea serviciilor in parametri normali.<br /><br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/61116462021-01-25T21:30:59+02:002021-01-25T21:30:59+02:00Nefunctionalitate DNS<p><small>Jan <var data-var='date'>25</var>, <var data-var='time'>21:30</var> EET</small><br><strong>Resolved</strong> - In cursul serii de 25.01.2021 intre orele 18.01 si 18.56 serverele DNS ROMARG au fost tinta unui atac de tip DDOS. Acest atac este ultimul dintr-o serie de 784 atacuri indreptate spre infrastructura ROMARG, fie ca vorbim de atacuri adresa clientilor nostri fie la adresa infrastructurii critice a data center-ului, de la 1 Ianuarie, 2021.<br /><br />Desi celelalte 783 de atacuri au fost mitigate cu succes fara efecte asupra functionarii serviciilor noastre, acest al 784 atac ne-a surprins exact in momentul in care echipamentele care asigura protectia serverelor DNS din data center faceau obiectul unei lucrari de mentenanta premergatoare unor lucrari de upgrade a infrastructurii critice.<br /><br />Colegii nostri au lucrat contra timp pentru ca echipamentele de protectie sa redevina operationale, iar imediat ce atacul a fost mitigat, serverele DNS au fost accesibile astfel ca site-urile dar si serviciile de email au redevenit si ele accesibile.<br /><br />De mentionat, ca in perioada de downtime serverele au fost complet functionale nu s-au inregistrat probleme de accesibilitate la nivelul cumunicarii IP serverele fiind up si functionale.<br /><br />Analizam in continuare acest incident pentru a lua pe viitor cele mai bune masuri de izolare a atacurilor.<br /><br />Ne pare rau pentru aceasta situatie si va asiguram ca depunem toate eforturile tehnice pentru a asigura functionarea neintrerupta 24/7/365 a serviciilor noastre.<br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/58148742020-12-30T13:20:38+02:002020-12-30T13:20:38+02:00Migrare clienti shared enduser, serverele 181 - 202<p><small>Dec <var data-var='date'>30</var>, <var data-var='time'>13:20</var> EET</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Dec <var data-var='date'>16</var>, <var data-var='time'>13:30</var> EET</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Dec <var data-var='date'>16</var>, <var data-var='time'>12:58</var> EET</small><br><strong>Scheduled</strong> - In intervalul de 16.12.2020 orele 13.30 - 31.12.2020 orele 13.30 vom realiza o lucrare de mentenanta pentru transferarea contractelor de gazduire pe alte servere.<br /><br />Downtime-ul estimat dupa migrare este de 30 secunde, downtime determinat de schimbarea ip-ului.<br /><br />Informatii legate de ip-ul noului server sau numele serverului pot fi gasit in aria de client respectiv in interfata cPanel specific pentru fiecare cont in parte.<br /><br />Veti beneficia in urma migrarii de:<br /><br />- performante superioare ale serverelor, sunt servere cu 48 - 56 core si pana la 256 GB Ram<br />- sistem de stocare mai rapid cu 25 - 30%<br />- conectivitate la internet de pana la 25 Gbps<br />- cele mai noi versiuni de Litespeed, server baze de date MariaDB 10.3, ultima versiune cPanel<br />- o solutie de inteligenta artificiala care se ocupa de securitatea datelor gazduite la ROMARG<br /><br />In masura in care asociata contului de gazduire exista si o adresa de ip, aceasta va fi transferata pe noul server impreuna cu datele dumneavoastra.<br /><br />In masura in care intampinati probleme cu site-ul dumneavoastra dupa migrare va rugam sa ne scrieti la adresa support@romarg.com<br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/57687122020-12-14T12:30:30+02:002020-12-14T12:30:30+02:00Migrare clienti shared enduser, serverele 162 - 203<p><small>Dec <var data-var='date'>14</var>, <var data-var='time'>12:30</var> EET</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Dec <var data-var='date'>10</var>, <var data-var='time'>12:31</var> EET</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Dec <var data-var='date'>10</var>, <var data-var='time'>11:55</var> EET</small><br><strong>Scheduled</strong> - In intervalul de 10.12.2020 orele 12.30 - 14.12.2020 orele 24.00 vom realiza o lucrare de mentenanta pentru transferarea contractelor de gazduire pe alte servere.<br /><br />Downtime-ul estimat dupa migrare este de 30 secunde, downtime determinat de schimbarea ip-ului.<br /><br />Informatii legate de ip-ul noului server sau numele serverului pot fi gasit in aria de client respectiv in interfata cPanel specific pentru fiecare cont in parte.<br /><br />Veti beneficia in urma migrarii de:<br /><br />- performante superioare ale serverelor, sunt servere cu 48 - 56 core si pana la 256 GB Ram<br />- sistem de stocare mai rapid cu 25 - 30%<br />- conectivitate la internet de pana la 25 Gbps<br />- cele mai noi versiuni de Litespeed, server baze de date MariaDB 10.3, ultima versiune cPanel<br />- o solutie de inteligenta artificiala care se ocupa de securitatea datelor gazduite la ROMARG<br /><br />In masura in care asociata contului de gazduire exista si o adresa de ip, aceasta va fi transferata pe noul server impreuna cu datele dumneavoastra.<br /><br />In masura in care intampinati probleme cu site-ul dumneavoastra dupa migrare va rugam sa ne scrieti la adresa support@romarg.com<br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/52492142020-10-13T10:00:29+03:002020-10-13T10:00:29+03:00Transfer contracte gazduire enduser. Inlocuire servere<p><small>Oct <var data-var='date'>13</var>, <var data-var='time'>10:00</var> EEST</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Oct <var data-var='date'>11</var>, <var data-var='time'>20:15</var> EEST</small><br><strong>Update</strong> - Scheduled maintenance is still in progress. We will provide updates as necessary.</p><p><small>Oct <var data-var='date'> 5</var>, <var data-var='time'>10:00</var> EEST</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Oct <var data-var='date'> 5</var>, <var data-var='time'>09:51</var> EEST</small><br><strong>Scheduled</strong> - Lucrarea de inlocuire servere inceputa in data de 26.09.2020 orele 23.00 se continua pentru urmatoarele 7 zile.<br /><br />Transferam contractele de gazduire enduser.<br /><br />Downtime-ul estimat dupa migrare este de 30 secunde, downtime determinat de schimbarea ip-ului.<br /><br />Informatii legate de ip-ul noului server sau numele serverului pot fi gasit in aria de client respectiv in interfata cPanel specific pentru fiecare cont in parte.<br /><br />Veti beneficia in urma migrarii de:<br /><br />- performante superioare ale serverelor, sunt servere cu 48 - 56 core si pana la 256 GB Ram<br />- sistem de stocare mai rapid cu 25 - 30%<br />- conectivitate la internet de pana la 25 Gbps<br />- cele mai noi versiuni de Litespeed, server baze de date MariaDB 10.3, ultima versiune cPanel<br />- o solutie de inteligenta artificiala care se ocupa de securitatea datelor gazduite la ROMARG<br /><br />In masura in care asociata contului de gazduire exista si o adresa de ip, aceasta va fi transferata pe noul server impreuna cu datele dumneavoastra.<br /><br />In masura in care intampinati probleme cu site-ul dumneavoastra dupa migrare va rugam sa ne scrieti la adresa support@romarg.com<br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/51864312020-10-04T23:00:31+03:002020-10-04T23:00:31+03:00Transfer Contracte. Inlocuire servere<p><small>Oct <var data-var='date'> 4</var>, <var data-var='time'>23:00</var> EEST</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Sep <var data-var='date'>26</var>, <var data-var='time'>23:00</var> EEST</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Sep <var data-var='date'>26</var>, <var data-var='time'>20:54</var> EEST</small><br><strong>Scheduled</strong> - Incepand cu data de 26.09.2020 orele 23.00 pana in 04.10.2020 orele 23.00 vom transfera toate contractele de gazduire enduser si resellerpe servere noi.<br /><br />Downtime-ul estimat dupa migrare este de 30 secunde, downtime determinat de schimbarea ip-ului.<br /><br />Informatii legate de ip-ul noului server sau numele serverului pot fi gasit in aria de client respectiv in interfata cPanel specific pentru fiecare cont in parte.<br /><br />Veti beneficia in urma migrarii de:<br /><br />- performante superioare ale serverelor, sunt servere cu 48 - 56 core si pana la 256 GB Ram<br />- sistem de stocare mai rapid cu 25 - 30%<br />- conectivitate la internet de pana la 25 Gbps<br />- cele mai noi versiuni de Litespeed, server baze de date MariaDB 10.3, ultima versiune cPanel<br />- o solutie de inteligenta artificiala care se ocupa de securitatea datelor gazduite la ROMARG<br /><br />In masura in care asociata contului de gazduire exista si o adresa de ip, aceasta va fi transferata pe noul server impreuna cu datele dumneavoastra.<br /><br />In masura in care intampinati probleme cu site-ul dumneavoastra dupa migrare va rugam sa ne scrieti la adresa support@romarg.com<br /><br />ROMARG</p>tag:status.romarg.com,2005:Incident/36596772020-03-08T11:15:31+02:002020-03-08T11:24:51+02:00Mentenanta Urgenta la Retea<p><small>Mar <var data-var='date'> 8</var>, <var data-var='time'>11:15</var> EET</small><br><strong>Completed</strong> - Lucrarea de mentenanta a fost finalizata cu succes. Serviciile au fost intrerupte pentru 210 secunde. Ne pare rau pentru neplacerile cauzate de aceasta lucrare de mentenanta.</p><p><small>Mar <var data-var='date'> 8</var>, <var data-var='time'>11:00</var> EET</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Mar <var data-var='date'> 8</var>, <var data-var='time'>10:51</var> EET</small><br><strong>Scheduled</strong> - Urmeaza sa realizam o lucrare de mentenanta in regim de urgenta in urmatoarele minute la nivelul infrastructurii de core. Aceasta lucrare va avea impact asupra functionarii serviciilor pentru maxim 15 minute. In acest interval accesul la servere va fi limitat total sau partial. Ne pare rau pentru inconveniente si speram ca aceasta intrerupere sa fie cat mai scurta. Va multumim pentru intelegere si revenim cu un update imediat ce lucrarea a fost finalizata.</p>tag:status.romarg.com,2005:Incident/36352862020-03-03T23:00:39+02:002020-03-03T23:00:39+02:00Lucrare mentenanta retea<p><small>Mar <var data-var='date'> 3</var>, <var data-var='time'>23:00</var> EET</small><br><strong>Completed</strong> - The scheduled maintenance has been completed.</p><p><small>Mar <var data-var='date'> 2</var>, <var data-var='time'>23:00</var> EET</small><br><strong>In progress</strong> - Scheduled maintenance is currently in progress. We will provide updates as necessary.</p><p><small>Mar <var data-var='date'> 2</var>, <var data-var='time'>18:02</var> EET</small><br><strong>Scheduled</strong> - Inginerii nostri vor realiza lucrari de mentenanta si upgrade a infrastructurii de detectie si mitigare a atacurilor de tip DDOS/Flood. Lucrarea este programata sa se intinda pe o perioada de maxim 24 ore. <br /><br />Scopul nostru este ca aceasta lucrare sa fie realizata fara downtime. Totusi, luam in calcul posibilitatea ca pe acest interval de timp sa apara una sau mai multe intreruperi. Fiecare intrerupere ar trebui sa dureze intre 2 si 5 minute maxim. <br /><br />Va rugam sa aveti in vedere, ca nu vom opri sau restarta serverele, datele dumneavoastra fiind in sigurata. Este o lucrare ce afecteaza doar infrastructura de retea.<br /><br />Detalii legate de lucrare:<br />Data 02.03.2020 (2 Martie, 2020) - 03.03.2020 (3 Martie, 2020)<br />Ora estimata de incepere este 23.00 in seara de 02.03.2020</p>tag:status.romarg.com,2005:Incident/36349822020-03-02T11:00:00+02:002020-03-02T16:49:54+02:00Functionare intermitenta<p><small>Mar <var data-var='date'> 2</var>, <var data-var='time'>11:00</var> EET</small><br><strong>Resolved</strong> - Astazi Luni, 02.03.2020, incepand cu orele 11.30 infrastructura ROMARG a fost afectata de mai multe valuri de atacuri DDOS. Expertii nostri au intervenit si au restabilit functionalitatea serviciilor</p>tag:status.romarg.com,2005:Incident/36252232020-02-28T15:30:00+02:002020-02-28T18:22:42+02:00Probleme conectivitate - Downtime<p><small>Feb <var data-var='date'>28</var>, <var data-var='time'>15:30</var> EET</small><br><strong>Resolved</strong> - Ce s-a intamplat si ce masuri am luat?<br /><br />Incepand cu data de 24 Februarie 2020, aproximativ orele 17.20, Centrul de date ROMARG a fost afectat de cateva probleme de conectivitate ce au afectat partial sau total accesul la serverele noastre.<br /><br />Aceste probleme au fost generate de echipamentul care asigura conexiunile de interconectare cu furnizorii nostri de internet, dar si routarea traficului in reteaua ROMARG.<br /><br />In prima faza, inca de la primul incident am intervenit pentru a lua masurile corective necesare astfel incat sa refacem conectivitatea si de stabiliza legaturile la internet iar fiecare client sa poata accesa din nou resursele gazduite la noi. <br /><br />In faza a doua, am investigat cauzele acestui incident pentru a lua masurile preventive necesare. In urma investigatiilor a reiesit ca o eroare software la nivelul router-ului a determinat comportamentul atipic. In urma acestei investigatii am decis si care este cea mai buna metoda de solutionare.<br /><br />Decizia a fost sa inlocuim echipamentul ce prezenta defectiunea. Pentru a ne asigura ca aceasta situatie nu se va repeta, echipamentul defect a fost inlocuit cu alte patru routere ce asigura atat o performanta sporita cat si au rolul de a se suplini atunci cand este unul dintre ele este defect sau este supus unei lucrari de mentenanta.<br /><br />Pentru a face aceasta inlocuire, aici la ROMARG, am lucrat aproximativ 30 de ore timp in care au fost configurate cele 4 routere, respectiv a fost reconfigurata toata reteaua de CORE si Border a centrului de date. <br />Rezultatul fiind redundanta completa, dar si o performanta net superioara la nivel de capacitate de interconectare internet si routare trafic.<br /><br />Capacitatea, initiala, maxim agregata de internet de 60 Gbps cu un nivel de 320 Mpps IP forwarding a fost crescuta in urma acestor lucrari. Acum putem agrega trafic la de peste 150 Gbps trafic internet, respectiv 1152 Mpps IP forwarding.<br /><br />Lucrarea de mentenanta a fost finalizata in noaptea de 25-26 Februarie in jurul orelor 12.30, trecerea pe noua infrastructura fiind realizata in jurul orelor 01.30 - 01.40 noaptea.<br /><br />Din pacate, cel mai probabil din pricina efortului depus, dupa finalizarea lucrarii de mentenanta s-a omis reverificarea licentelor aplicate software-ului de routare pe toate routarele. Fara sa ne dam seama, in urma restart-urilor repetate si a schimbarii unor componente hardware, din cele 4 routere doua au ramas nelicentiate desi initial ele au fost validate ca licentiate. Asta a facut sa functioneze timp de 48 de ore fara licenta. Dupa expirarea celor 48 de ore cele 2 routere s-au oprit iar traficul inspre si dinspre retea sa nu mai fie forwardat.<br /><br />Asta a facut ca azi noapte (noaptea de 27 spre 28 Februarie) in jurul orelor 0.30 data centerul nostru sa fie afectat de un nou downtime. Desi s-a intervenit imediat pentru investigatie si rezolvare, timpul de remediere a fost mai mare decat ne-am fi asteptat. Problema de licentiere a fost ultima la care ne-am gandit, router-ele fiind initial licentiate. <br /><br />Imediat ce am realizat cauza problemei, am luat masurile necesare pentru revalidarea routerelor. Serverele au fost accesibile din nou incepand cu orele 01.08 iar dupa orele 02.30 toate routerele functionau complet.<br /><br />Ce facem in continuare?<br /><br />Vom continua sa consolidam infrastructura de border si core prin extinderea topologiei full mesh astfel incat pana la sfarsitul luni Martie, 2020 sa instalam inca 4 noi routere si sa atingem astfel nivelul de redundanta 2N corespunzator standardului Tier 4. Standard ce reprezinta cel mai inalt nivel de certificare a Centrelor de Data le nivel mondial.<br /><br />Aceasta consolidare ne va asigura si o dublare a capacitatii de routare la peste 300 Gbps, respectiv 2304 Mpps IP forwarding.<br /><br />Ce facem cu downtime-ul?<br /><br />Am masurat pe parcusul lunii Februarie, 13 intreruperi pricinuite de aceste probleme care au determinat o intrerupere de o ora si 10 minute in furnizarea serviciilor. Aceste intreruperi au condus la un uptime de 98.95% in medie la nivelul retelei ROMARG.<br /><br />In conformitate cu Angajamentul de Calitate (SLA), va invitam sa va adresati depamentului plati, pentru alocarea perioadei de gratuitate. Detalii despre la adresa https://www.romarg.ro/angajament-de-calitate.html<br /><br />Ne pare rau pentru neplacerile create de aceste probleme, si va asiguram ca depunem toate eforturile pentru a asigura cea mai buna infrastructura de hosting din Romania.<br /><br />Radu TOFAN<br />CEO, Owner ROMARG</p>tag:status.romarg.com,2005:Incident/26092132019-06-26T12:51:40+03:002019-06-26T12:51:40+03:00Suport telefonic indisponibil<p><small>Jun <var data-var='date'>26</var>, <var data-var='time'>12:51</var> EEST</small><br><strong>Resolved</strong> - Suportul telefonic este din nou functional. Avaria a fost remediata.</p><p><small>Jun <var data-var='date'>26</var>, <var data-var='time'>11:41</var> EEST</small><br><strong>Investigating</strong> - Inca din cursul zilei de ieri 25, Iunie 2019 nu putem prelua apelurile dumneavoastra. Aparent circuitul de fibra optica ce asigura legatura cu Vodafone a fost afectat de o lucrare a Electrica.<br /><br />Informatiile primite ne confirma faptul ca in urmatoarele 2-3 ore problema va fi remediata.<br /><br />Ne pare rau pentru aceasta situatie. Ne puteti contacta in continuare prin sistemul de tickete disponibil la https://support.romarg.com sau prin LiveChat.<br /><br />Vom reveni cu update pe masura ce avem informatii noi.</p>