We have not observed any new latencies since Friday evening, so we consider this incident resolved. Our teams are continuing to work on new optimizations to avoid a recurrence of the problem in the coming weeks. We thank you for your patience and apologize for any inconvenience caused.
//
Nous n'avons pas observé de nouvelles latences depuis vendredi soir, nous considérons donc cet incident comme résolu. Nos équipes continuent à travailler sur de nouvelles optimisations afin d'éviter une résurgence des problèmes dans les prochaines semaines. Nous vous remercions pour votre patience et nous vous prions de nous excuser pour la gêne occasionnée.
Posted Mar 05, 2024 - 09:41 UTC
Monitoring
The situation returned to normal on Friday evening, and all pending distributions were processed. This morning, we are not observing any latency on our various applications, and the processing of document distributions is normal. This incident is over, so there is no longer any impact for end users. However, we are continuing our monitoring today and will continue our investigations over the next few days to analyze the various causes of last week's incidents.
//
La situation est rentrée dans l'ordre vendredi dans la soirée et toutes les distributions alors en attente, ont pu être traitées. Ce matin nous n'observons pas de latences sur nos différentes applications et le traitement des distributions de documents est normal. Cet incident est terminé et il n'y a donc plus aucun impact pour les utilisateurs finaux. Cependant, nous poursuivons notre surveillance aujourd'hui et nos investigations vont continuer sur les prochains jours pour analyser les différentes causes des incidents de la semaine dernière.
Posted Mar 04, 2024 - 11:01 UTC
Identified
We have identified a new incident directly affecting document distribution. Some files appear to be blocked or in an unfinalized error status (which unfortunately prevented us from detecting them more quickly). Investigations are underway to determine the cause of this new problem and correct it. At the same time, our teams restarting the processing of the affected files in an attempt to finalize them as quickly as possible. We are currently observing high latency levels involving processing delays of several hours due to this problem.
//
Nous avons identifié un nouvel incident impactant directement la distribution de documents. Certains fichiers paraissent en effet bloqués ou sont dans un statut d'erreur non finalisé (nous ayant malheureusement empêché de les détecter plus rapidement). Des investigations sont en cours pour déterminer la cause de ce nouveau problème et la corriger. En parallèle, nos équipes sont en train de relancer les fichiers impactés pour tenter de les finaliser au plus vite. Nous observons actuellement de fortes latences impliquant des traitements retardés de plusieurs heures à cause de ce problème.
Posted Mar 01, 2024 - 17:14 UTC
Update
We're seeing a clear improvement in the situation for applications today. Latencies have been significantly reduced and now enable smooth, uninterrupted browsing. Our teams are actively working on further optimizations, which should be implemented as early as next week. We'll be keeping a close eye on the situation as it evolves.
//
Nous constatons une nette amélioration de la situation aujourd’hui au niveau des applications. Les latences se sont nettement réduites et permettent désormais une navigation sans erreurs. Nos équipes travaillent activement sur de nouvelles optimisations qui devraient être mises en place dès la semaine prochaine. Nous restons très attentifs à l'évolution de la situation.
Posted Mar 01, 2024 - 11:50 UTC
Monitoring
This afternoon (Paris time) we made some changes to our infrastructure which have considerably improved our document distribution performance. Your files are now handled much more quickly. Positive effects should also be seen on the performance of our applications, with a gradual reduction in slowness. We are keeping a close eye on the situation
//
Nous avons réalisé dans le courant de l'après-midi (heure de Paris) des modifications au niveau de notre infrastructure qui ont permis de considérablement améliorer nos performances en terme de distribution de documents. Vos fichiers sont à présent pris en charge beaucoup plus rapidement. Des effets positifs devraient également être visibles du coté des performances de nos applications avec une réduction progressive des lenteurs. Nous restons très attentifs à la situation.
Posted Feb 29, 2024 - 16:13 UTC
Update
The situation is still similar today. Applications in the People Assist and Document Manager lines are still experiencing sporadic latency, while the eVault application (MyPeopleDoc) is experiencing permanent latency. An infrastructure patch was implemented yesterday evening (Paris time), but unfortunately had no positive impact on the situation. Our product teams have introduced an alert message on the eVault login page indicating that problems are ongoing, to warn end-users and try to limit the feedback you may receive on this topic. In terms of distributions, we are once again experiencing a heavy workload, and unfortunately delays are still to be expected today. Yesterday's pending distributions have all been processed, apart from a very few exceptions which our teams are working on as a matter of priority this morning. We'll keep you informed of any major progress on this incident.
//
Situation toujours similaire aujourd'hui. Les applications des lignes People Assist et Document Manager subissent toujours des latences sporadiques tandis que l'application eVault (MyPeopleDoc) subit une latence permanente. Un correctif au niveau infrastructure a été implémenté dans la soirée d'hier (heure de Paris) mais n'a hélas pas eu d'impact positif sur la situation. Nos équipes produit ont introduit un message d'alerte sur la page de connexion eVault indiquant que des problèmes sont en cours pour prévenir les utilisateurs finaux et tenter de limiter les remontées que vous pouvez recevoir à ce sujet. Au niveau des distributions, nous observons à nouveau une charge importante actuellement et des délais sont encore à prévoir aujourd'hui malheureusement. Les distributions en attente hier ont toutes été traitées sauf de très rares exceptions sur lesquelles nos équipes sont en train de travailler en priorité ce matin. Nous vous tiendrons informés en cas d'avancée majeure au niveau de cet incident.
Posted Feb 29, 2024 - 09:34 UTC
Update
With the exception of a few special cases, all distributions that were on hold yesterday were processed overnight as expected. Today was similar to yesterday, with little or no latency on the main applications. The eVault application (MyPeopleDoc) is still impacted by significant latency peaks, but remains usable. Unsurprisingly, it's still document distributions that are most affected, with longer processing times, and which are processed at worst the night after they are submitted.
//
Hormis de rares cas particuliers, toutes les distributions qui étaient en attente sur la journée d'hier ont pu être traitées dans la nuit comme attendue. Cette journée ressemble à celle d'hier avec pas ou peu de latence sur les applications principales. L'application eVault (MyPeopleDoc) est toujours impactée par des pics de latence importants mais reste utilisable. Sans surprise hélas ce sont toujours les distributions de documents qui sont le plus impactées, avec des délais de traitement allongés, et qui sont traitées au pire la nuit suivant leur dépôt.
Posted Feb 28, 2024 - 11:24 UTC
Update
At the end of the day (Paris time), we're seeing low latency in People Assist and Document Manager. The eVault application (MyPeopleDoc) is a little more affected, but remains usable. The biggest delays are in document distribution. The fixes implemented this month are effective, but unfortunately the problem has moved on. Our teams have intervened several times since yesterday to keep processing delays to a minimum. At the moment, the queues are very congested, but we are counting on the drop in workload during the night to enable us to catch up with the backlog we have accumulated during the day. We will keep you informed of any major developments.
//
En cette fin de journée (heure de Paris), nous observons de faibles latences du coté des produits People Assist et Document Manager. L'application eVault (MyPeopleDoc) est un petit peu plus impactée mais reste utilisable. Les délais les plus importants sont au niveau des distributions de documents. Les correctifs mis en place ce mois-ci sont efficaces mais le problème s'est hélas déplacé. Nos équipes sont intervenues à plusieurs reprises depuis hier pour limiter au maximum les retards de traitement. Les files d'attentes sont pour le moment engorgées mais nous comptons sur la baisse de charge de la nuit pour nous permettre de rattraper le retard que nous avons accumulé durant la journée. Nous vous tiendrons informés en cas d'évolution majeure.
Posted Feb 27, 2024 - 17:17 UTC
Update
(European servers only) We're now seeing latency in all our applications. The consequences can be longer than normal response times and 500 errors. Our teams are continuing to work on resolving these problems.
//
(Serveurs Européens seulement) Nous constatons désormais des latences sur toutes nos applications. Les conséquences peuvent être des temps de réponse plus longs que la normale ainsi que des erreurs 500. Nos équipes continuent de travailler à la résolution de ces problèmes.
Posted Feb 27, 2024 - 13:54 UTC
Identified
(European servers only) The eVault (MyPeopleDoc) application is currently experiencing slowdowns and errors. Our teams have identified the source of the problem, and are taking action to resolve it.
//
(Serveurs européens uniquement) L'application eVault (MyPeopleDoc) fait actuellement face à des ralentissements et à des erreurs. Nos équipes ont trouvé la source du problème, des actions sont en cours afin de le résoudre.
Posted Feb 27, 2024 - 10:47 UTC
This incident affected: People Assist (Request Manager, Digital Process Manager, Knowledge Base) and Document manager (Document Manager Core, Smart Document Generation, eSignature, Employee Vault).