Vous n’êtes pas connecté à Internet.
Savoir-faire 119347

Black Friday: comment une expérience risquée nous a sauvés la journée

Vendredi dernier, l’état d’urgence était déclaré chez Digitec Galaxus AG. Le plus gros souci: est-ce que les serveurs tiendront le coup face à l’afflux? Enes Poyaz, Software Engineer, était en première ligne. Il parle du jour où tous les ingénieurs ont misé sur le même cheval.

17 secondes. C’est le temps qu’il a fallu pour que digitec.ch soit pour la première fois hors ligne lors du fameux Black Friday. La raison: trop de demandes d’utilisateurs. Les serveurs de notre entreprise ont capitulé après 17 secondes sous le poids des demandes. Trop de clients voulaient profiter des offres spéciales lors de la journée de soldes internationale.

«En fait, nous pensions que les serveurs tiendraient plus longtemps», dit Enes Poyraz, Junior Software Engineer.

L’ingénieur parle d’une journée où lui et son équipe ont forcé une entreprise à improductive et où les ingénieurs ont sauvé vos offres dans un acte de désespoir.

Nos serveurs nous ont abandonnés après 17 secondes de Black Friday

Enes est là à la seconde où les serveurs fléchissent pour la première fois. Car, chaque année, une équipe d’ingénieurs – toutes sont nommées d’après des James Bond – est toujours en stand-by pour le Black Friday. Dans les nouveaux bureaux de la Förrlibuckstrasse, à la maison en home office ou quelque part sur les ordinateurs portables avec l’Internet mobile. Ils attendent que les serveurs fléchissent.

Cependant, à minuit, ils arrivent à leurs limites. Les ingénieurs d’habitude si fiers doivent encaisser un coup dur. Les hommes et les femmes qui trouvent déjà un arrêt de quelques petites secondes trop long ont seulement réussi à rendre les serveurs opérationnels après deux bonnes heures. Mais la boutique en ligne n’était pas stable. Le site était souvent hors ligne, mais pas longtemps. Seul un flux en direct du Digital Marketing est actif.

«Certes, cela est pénible pour les clients, mais du côté des ingénieurs, c’est un comportement attendu», dit Enes. Il hausse les épaules. Bien sûr, c’est désagréable et les ingénieurs essaient de minimiser ces périodes. Mais quand une nation va à l’assaut d’un site Internet, cela peut se produire.

La seconde vague

Le calme revient. Après 2 heures, les Suisses ont chassé les bonnes affaires et dorment. Plus tard, au cours de la journée, j’ai appris qu’à la succursale de Zurich, une personne était entièrement consacrée aux abonnements. Car vendredi dernier, les clients profitaient de 50 % de rabais sur leur smartphone s’ils concluaient un contrat. Les abonnements peuvent aussi être obtenus en ligne.

171110_dig_blackMobile_teaser_1920x1400_bs21.jpeg
Réductions
  • 36255

Seulement aujourd’hui: 50% de rabais sur chaque smartphone avec abonnement mobile!

Mais Enes n’en savait rien. Peu avant 3 heures de matin, il rentre chez lui et dort quelques heures d’un sommeil agité. À côté de lui, son téléphone portable en mode «son»: à tout moment, il pourrait recevoir un appel et devrait se rendre au bureau à cause des serveurs qui sont en panne. Mais l’appel ne vient pas. Enes dort. Les autres ingénieurs font pareil, tout comme Raphael Renaud, Teamleader Software Engineering qui est de service de piquet. Le téléphone de Raphael a sonné à 5 heures du matin. Un appel de Wohlen avec pour question: pourquoi y a-t-il aussi peu de commandes dans le système? Le centre logistique de Wohlen est aussi en état d’urgence pour le Black Friday et fonctionne à plein régime avec un effectif de personnel maximal.

Vers 9 heures, il est de nouveau au travail et se décrit comme ayant assez dormi. Les serveurs tiennent le coup. De justesse.

«La charge a continuellement augmenté au cours de la journée», dit Enes, «et nous avons compris que si cela continue comme ça, nous ne tiendrons pas la journée.»

C’est hors de question. Comme il y a plus d’ingénieurs dans le bureau que l’équipe de piquet de la nuit dernière, ils peuvent se répartir. Une équipe se focalise sur les systèmes internes. Tout ce qui peut être éteint est éteint. Un e-mail du Chief Information Officer Oliver Herren informe les employés digitec vers 9 h 36 pour dire que le système de pointage des heures de travail ainsi que certaines fonctions en arrière-plan de la boutique seront éteints pour économiser les ressources des serveurs. Tout ce que nous pouvons héberger localement et éteindre est éteint.

Dans les bureaux du siège principal de Zurich, les employés sont étonnés. Nous sommes une boutique en ligne. Notre site Internet est notre capital, celui qui paie nos factures et vous apporte vos nouveaux appareils. Nous sommes inquiets. Surtout, car la rédaction peut, plus ou moins, cesser ses activités. Tout le Magazine est bannis de la page principale. Les images sur lesquelles vous cliquez prennent trop de ressources.

Mon clavier reste inutilisé, mais j’expérimente avec du matériel hors ligne.

Mais rien n’y fait: à midi, le serveur retombe une nouvelle fois en panne. Pas aussi gravement que la nuit dernière, le site s’affiche et disparaît toutes les quelques secondes, mais tout de même trop instable pour une bonne expérience d’achat sur le site.

Les ingénieurs oublient la pause de midi et donnent leur maximum pour remettre le site en ligne.

Une expérience sauve la journée

Alors qu’Oliver et une équipe d’ingénieurs composé de tous les départements de l’Engineering ont mis des services hors ligne, Enes et deux autres ingénieurs étaient occupés à faire un plan de bataille. Que faire quand mettre les services internes hors ligne ne suffit pas?

Les trois ingénieurs ont reçu la mission de trouver une solution quand toutes les autres solutions échouent.

«Plus anticonformiste est impossible», dit Enes. Il est tout de même fier d’appartenir à l’équipe qui a sauvé la journée. L’homme d’ordinaire plutôt calme parle cette fois un peu plus fort.

La solution s’appelle Redis, un système en cache que les ingénieurs observent du coin de l’œil. Enes fait partie de ceux qui ont testé des applications sur ce dernier. Un cache n’est rien d’autre qu’une mémoire de données qui sauvegarde les demandes les plus faites et les traite donc plus rapidement. Un exemple: si vous et des milliers d’autres personnes souhaitez accéder à la page Black Mobile, la banque de donnée derrière le site Web ne doit plus être consultée à chaque fois. Le cache a déjà sauvegardé une version de la page et vous l’affiche. Ainsi, les ressources peuvent être utilisées pour d’autres processus d’achat.

«Bien sûr, nous avons une solution de mise en cache qui fonctionne parfaitement en temps normal», dit Enes. Mais chaque fois qu’un serveur tombe en panne, les caches doivent être recalculées. Encore pire: chacun de nos serveurs calcule le cache localement. C’est-à-dire que chaque fois qu’un serveur est en panne, le cache doit être recalculé localement sur la machine du serveur; ce qui consomme des ressources dont les clients ont besoin. Plus personne dans l’entreprise ne pense aux lecteurs du Magazine. Les départements du marketing ont depuis longtemps jeté l’éponge, le management de produit se demande si leurs stocks suffiront, les employés des succursales sont confrontés à de longues files d’attente et les ingénieurs font face à une horde d’acheteurs et ne pensent pas à abandonner.

«Je n’ai jamais vraiment testé Redis», dit-il, «mais j’ai passé deux jours à faire quelques tests». Ça ne sera jamais assez pour confier la plus grande boutique en ligne de Suisse au système. Quand Enes regarde ses notes prises il y a deux semaines, il sourit.

Il a certainement quelques domaines d’applications chez nous
Notes d’Enes Poyraz

Les ingénieurs décident de mettre en ligne Redis sans l’avoir testé sur un système de démo. Une action risquée. Avant qu’une entreprise intègre un logiciel dans un système en direct, il est testé de fond en comble par différents postes internes et souvent aussi externes. En effet, ce n’est pas parce qu’un logiciel est décrit comme exactement ce dont votre système a besoin par le marketing du fabricant que le logiciel apporte la valeur ajoutée promise. Parfois, tout empire avec son utilisation.

On demande à Enes: «Tu penses que ça va le faire?»

L’ingénieur acquiesce.

Redis prend en charge

À partir de ce point, tout se passe très vite. Comme, d’après les informations d’Enes, Redis est «super rapide et facile à utiliser», le serveur est prêt en 20 minutes. Là où l’ancien système en cache digitec fonctionnait localement sur chaque serveur, Redis fonctionne de manière centrale sur un serveur et calcule aussi les demandes sur les autres serveurs. En d’autres termes, chaque serveur écrit dans le cache Redis, ce qui rend la solution plus évolutive et réduit la charge des serveurs de lecture.

«Mais pour ne pas se lancer dans une mission totalement périlleuse #yolo, nous avons encore installé un SwitchBit», précise Enes. De plus, une petite équipe de l’IT Operations a dû se porter volontaire pour toujours surveiller les serveurs pour que la boutique ne soit pas complètement HS. IT Ops a déjà passé toute la journée à surveiller la performance des serveurs. D’après Enes, ce sont eux qui ont couvert son équipe pour faire l’expérience avec Redis.

Le problème arrive avec le go-live que se passe de la manière la plus désordonnée possible. Enes veut lancer Redis sur un Managed Server de Microsoft pour que les charges de deviennent pas trop grandes en interne.

«Malheureusement, Redis fonctionne sur le port 6380, fermé chez nous», dit-il. En urgence, il demande l’ouverture du port, qui n’est malheureusement par possible: il est justement bloqué par le serveur Microsoft. Mais Enes a appris une chose: il a toujours un second plan prêt à l’emploi.

«En parallèle, j’ai essayé de faire marcher Redis sur le cloud Google», ajoute-t-il. Mais ça aussi s’avère plus difficile que prévu. Avec l’aide de Michal Nebes, Senior Software Engineer, il arrive à créer un cluster Redis.

Vers 16 heures, c’est du sérieux. Un petit review de code. D’après Boško Stupar, Senior Software Engineer, le code fonctionne et il mesure de round trop des données, c’est-à-dire le temps dont les données ont besoin pour être envoyées au serveur et pour revenir à l’ordinateur de l’utilisateur.

  • Normal: de 50 à 500 millisecondes. Trop lent
  • Redis, système de test local: de 8 à 9 millisecondes
  • Redis, productif: de 16 à 19 millisecondes

Redis est mis en ligne. Les ventes du soir sont placées entre les mains d’un système non testé avec une sécurité minimale.

Quelques secondes de panique.

Redis lis les demandes et constitue un cache.

La charge pesant sur les serveurs diminue sensiblement. La boutique en ligne se stabilise.

La charge CPU d’un serveur d’une boutique en ligne. À gauche les deux pics qui montrent une charge de 100% dans la nuit et vers midi.

Les ingénieurs respirent.

Plus tard, sur Facebook, Boško Stupar écrit:

Black Friday survit. C’était une journée incroyable dans ma carrière! Tellement stressante, tellement dure et tellement gratifiante. Pour les nerds: nous avons mis en place un caching two stage avec farm Redis centralisée. Opération à cœur ouvert sans anesthésie. PS Je déteste Black Friday.
Boško Stupar

Après le coucher de soleil, les ingénieurs se retrouvent autour d’une bière au cinquième étage à la Pfingstweidstrasse, avec toujours un œil sur la boutique en ligne. Une fête de folie ne ressemble pas vraiment à ça, mais ils de détendent.

Vers 18h55, Enes lève le statut d’urgence via WhatsApp:

«Redis is live»

Les serveurs fonctionnent normalement, sous une charge normale. Pendant ce temps, les gens attendent dans la succursale, souscrivent des abonnements pour smartphone et viennent récupérer des commandes. Adrian Maier, Store Manager, se trouve à l’entrée de la succursale de Zurich et informe sur le temps d’attente. Vingt minutes, quarante minutes. Il est fatigué, tout comme l’équipe derrière les caisses.

Les ingénieurs ont à moitié fini leur journée, mais les employés des succursales sont les derniers devant tenir le coup. Aux caisses, la journée se termine à 20 heures. Plus d’abonnements, plus de livraisons, plus de questions.

Quo vadis, Redis?

Le système Redis reste en ligne durant le week-end jusqu’à lundi soir pour pouvoir participer au Cyber Monday. Les ingénieurs sont fiers, la boutique en ligne sera stable lundi. Mais, dans un premier temps, Redis a fait son travail et le cluster sera à nouveau retiré du réseau.

«Une fois que tout est dit et fait, on parle tout de même d’un système encore peu testé», ajoute Enes.

Les ingénieurs ont une longue liste de questions qu’ils doivent traiter avant de pouvoir ajouter définitivement Redis au réseau avec bonne conscience. Parmi ces dernières, de nombreuses questions qui ressemblent à ça: «pourquoi est-ce que Redis fait $ding?»

Maintenant que la situation s’est à nouveau calmée, les ingénieurs peuvent se consacrer à ces questions. Car Black Friday leur a au moins montré une chose: Redis a du potentiel. Ne pas l’utiliser serait dommage.

User
Journaliste. Auteur. Pirate. Mes thèmes se tournent souvent autour d'Android ou d'Apple iOS. J'attache aussi beaucoup d'importance à la sécurité informatique, car la sécurité des données n'est, de nos jours, plus un détail insignifiant, mais bien une stratégie de survie.

Commentaires 119

User dominicwue

Sehr interessante Bericht :)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User alfagoldenglob

Super dann ist ja der Umsatz dieses Jahr gerettet

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User marco.luedi

Ganz Interessant! Danke für den Blick hinter die Kulissen und danke an die Engineers! Ihr habt echt super Arbeit geleistet am Freitag!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Perstin

Herr Bärlocher, ich gratuliere! Endlich wieder ein Artikel von Ihnen, den ich mit Begeisterung lesen kann. Den ich generell lesen kann, ohne eine Ihrer tiefen Abneigungen gegen Hersteller X in Form von Bashing zu verspüren. Ohne eine Abneigung gegen Ihren Schreibstil zu verspüren.

Weiter so!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Herzig, wie sich hier teilweise "Armchair Developers" mit ihrem Keyword-Bingo profilieren möchten.

Ich finde solche Berichte aus der Praxis sehr spannend. Verbessern kann man sich immer, ich glaube das weiss jeder ITler. Aber so einen "Incident" der Öffentlichkeit zu präsentieren zeugt von einer gesunden Portion Mut und Offenheit.

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User maxmustang

Und genau Freitagabend hat das System damit begonnen, im Einkaufskorb den regulären Preis zu nehmen, bei mehreren Produkten. Cache Systeme sind heikel, da sie Zustände zwischenspeichern ('noch 23 von 100') während die Datenbank effektiv bei 0 war und im Einkaufskorb der alte Preis kam.

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

genau das hab ich auch erlebt!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User maxmustang

Nachtrag für euch Entwickler: Trotz Browser Cache löschen der Stand blieb bei 23 von 400, sogar um 0030 Uhr Samstag (black friday ja fertig) gab der cache noch '4 von 400' an obwohl schon eine Stunde vorher ausverkauft war, also lokaler browser cache kann ausgeschlossen werden. Aeh, ja hoffe ihr geht dem wirklich nach für die Kunden die deshalb zuviel zahlen.

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User beginner99

It's not a bug it's a feature. Zumindest für digitecs Kontostand.

There are two hard things in computer science: cache invalidation and naming things.

Das sind genau die Sachen, die dann schief gehen, wenn man im Produktivsystem Experimente macht. Wäre jetzt noch gut zu wissen, ob all die Leute die jetzt zu teuer bestellt haben den Aktionspreis bekommen oder mindestens die Bestellung stornieren können.

06.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User maxmustang

Digitec hat super reagiert und auf meine Anfrage hin meine zu teuren Artikel sehr freundlich und unkompliziert auch zum Aktionspreis gegeben. Technisch hat dieses redmi auch Transaktionen, es ist jedoch zu befürchten dass diese mangels Zeit nicht im Einkaufskorb vercoded wurden(und müsste wohl an vielen orten) , sodass sich das redmi mit den Transaktionen/ bestehenden Lockingmechanismus gebissen hat - cache über mehrere Personen und locking/saubere Transaktionen - schwieriges Unterfangen.

06.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Saitek1992

Dieser Bericht ist auch interessant für Leute die nicht wissen, was eigentlich hinter der Kulisse in der IT alles los ist. Ich bin selbst System Engineer und durfte ständig Schmunzeln ;)

Danke für die gute Arbeit -> Wenn das gehen würde können sich die Engineers von meinem konto ein Bier gönnen ;)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User thomaskall

Für einen schweizer Onlineshop nicht schlecht. Aber normalerweise macht man doch die Lasttests vorher... :)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User A_B_C_D

Solche "Last-Tests" kommen einer DDOS Attacke gleich. Das hält kein Server durch ;-) Sieht man ja 17 Sekunden. Mehr braucht es nicht um einen Server in die Knie zu zwingen :-P

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User rpf13

Cooler Artikel, aaaaber: SEHR SCHLECHTE VORBEREITUNG! Nachdem letztes Jahr die Hölle los war dieses Jahr wieder? Ihr hattet genug Zeit euch vorzubereiten....und es gibt diverse Firmen und Onlineshops, die beweisen, dass es auch anders geht und man auch mit vieeel mehr Last locker zurecht kommen kann

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User fabiomota

Vorzubereiten in wie fern? Glaub mir, die waren sehr wohl vorbereitet. Ja, man könnte einige tausend Franken ausgeben um die Ressourcen zu erweitern und mehr Leistung zu haben .... und dann stehen diese Systeme übers ganze Jahr ungebraucht da. Verschwendung puur.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Und trotzdem konnte ich über eine Stunde nicht auf die Seite zugreifen und habe somit mein Schnäppchen einfach schlichtweg verpasst. Und wenn man schon letztes Jahr einen solchen Ansturm hatte, dann hätte man es dieses Jahr besser machen können. Ich gebe Rpf13 recht.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User rpf13

Rechenpower, Loadbalancer, Ressourcen kann man in einem modernen Umfeld dynamisch erweitern, eben damit die Kapazität nicht das ganze Jahr verschwendet wird. Andere Firmen schaffen es auch locker damit umzugehen und die haben noch viel mehr Traffic und Anfragen auf ihre Page. Somit zählt diese Ausrede definitiv nicht, vor allem nicht da es letztes Jahr ja schon mal passiert ist....

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Envaya

ich weiss ja nicht warum alle hier von Erfolg reden..ich kam praktisch den ganzen Tag nicht auf die Seite but oh well

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User ChrisBlaser

Es ist erlich gesagt eher trageisch den Artikel so hinzu Stellen, als ob die IT digitec den BlackFriday rettete. Ganz ehrlich, wärend Brack oder andere ganz klar das im Griff hatten, war bei euch erreut alles unten. Einmal gehts, ein zweitesmal und ein Jahr Zeit ist nicht akzeptabel aus meiner Sicht. und da ich selber solche Peaks geplant, vorbeireitet und mit Stresstests der IT Spezialisten verbracht hab, weiss ich dass das hier ein 100% versagen der IT war.
Hoffen wir mal nextes Jahr nicht.

03.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User sonyc78

Ich verstehe zwar nur einen Bruchteil der IT-spezifischen Erklärungen aber es scheint doch ein ziemlicher Hoselupf gewesen zu sein... Schon verrückt was im Hintergrund so abgeht!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Also wenn ich das richtig verstehe laufen interne Tools auf den produktiven Shop Servern und es wurde zuvor auf caching verzichtet. Why!?
Zudem muss ich sagen für einen individual entwickelten Shop performt er wirklich nicht sehr gut. Vermutlich eine monolithische Architektur.

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User felixhofer

Nein, da hast du weder richtig verstanden noch richtig gelesen...

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Also laufen die internen Tools auf dedizierten Serven und Netzwerken? Und ein caching (nebst dem lokalen Application Cache) wird eingesetzt? Ich kenne nur die Infos aus dem Artikel und da steht was anderes. Man muss mit Feedback auf Basis der im Artikel vorhandenen Infos rechnen.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User felixhofer

Also bezüglich internen Tools habe ich dich falsch verstanden. Dachte du meintest das "ungetestete Redis". Weiss jetzt, was du meinst. Darüber sagt der Artikel nicht wirklich etwas aus. Fakt ist, dass sowohl Shop als auch interne Verwaltung auf die selben/ähnlichen Daten(banken) zugreifen muss. Mehr kann ich dazu nicht sagen. Du meinst wahrscheinlich erwähnte Stundenerfassung o. Ä. Keine Ahnung... Fragst du Support... ;)
Heutzutage wird eh alles virtualisiert, kann also alles irgendwo laufen... Wer weiss...

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User hedwig1936

Also das die internen Tools auf produktiven Shop-Systemen laufen habe ich auch so verstanden, was meiner meinung nach schon fast fahrlässig ist, mal abgesehen von der nicht vorhandenen Skalierungsmöglichkeiten...

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User hedwig1936

@Felixhofer "Fakt ist, dass sowohl Shop als auch interne Verwaltung auf die selben/ähnlichen Daten(banken) zugreifen muss" Ich glaube kaum dass ein Zeiterfassungstool auf die Shopdatenbank zugreifen muss...

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Ich denke euch fehlen 3 Dinge: Message queue middleware für Verarbeitungswarteschlangen, resiliente Microservices die vertikal skalieren und anständige Loadbalancer bzw. reverse proxies. Dann seid ihr fürs die nächste Aktionsschlacht gewappnet 🖖

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User timcbaoth

Es geht, glaube ich, sicher in diese Richtung. Es wird aber sicher eine gewisse Zeit dauern, die aktuelle Architektur an dieses Ziel zu bringen. Hier gibt es einen kleinen Einblick in die aktuellen Entwicklungen: digitec.ch/de/page/wie-sich...

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Spannender Artikel, danke für den Link. Dass viel Innovation in einem Shop möglich ist, zeigt Digitec ganz klar. Daher ist Digitec auch einer der führenden Online Shops.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User KarmaEDV

Not macht erfinderisch. Schöner Blick hinter die Kulissen. Ich als Dev nehme mir das zum Vorbild. 👍

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Und jetzt stellt euch mal vor, was am Black Friday bei Amazon los war...

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

I would not say so, knowing how their team works, they just prepare instead of "hope".

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User KarmaEDV

Ach im notfall kann amazon auf die Cloud setzen...

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

..welche sie selbst betreiben.. :-)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Bringt mich irgendwie darauf, wann digitec die ersten Cloud Services wohl anbietet? Rent a Digitec VM? :-)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User andyforpresident

AWS ist genau aus dem Black Friday Problem enstanden! Weshalb ich nicht verstehe, wieso digitec.ch nicht von den grossen abgeschaut hat, all die Public Clouds bietet sich doch genau für so ein Webservice an.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

You should look for a real tech team. I mean it, really. It's just... embarassing. The graphs you paste, the "experiments"... architecture of your system, where shop db is used for employee time tracking... A skilled junior developer or architect would tell you that you need to improve competences!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User wavto

Danke für den spannenden Einblick in eurer nuit blanche am black friday. Hammer Artikel!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User loicschneider

Cool Aber......Wieso eigentlich immer diese "Engineers"? Ingenieure heisst dass auf deutsch oder IT Spezialisten, wäre da treffender und definitiv weniger nervend. Nur weil es auf englisch ist macht es den Bericht nicht besser nur mehr "Hipster"

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User STIMO1989

Sind das nicht SYSTEM Engineers?

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User boskicthebrain

Es waren einige Leute involviert: Entwickler, ItOps, SRE, Architekten aber das Core-Team waren 3+ Leute die auf die Job-Titel an dem Tag nicht geschaut haben, sondern einfach gemacht ;)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User KevRWL

Oder man mietet Server die mit dem Cloud System arbeiten und stellt dies vorgängig ein für den Black Friday. Klar kostet Geld aber hey, man ist ONLINE.. :)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User MrDraxs

Eure Schreibweise erstaunt mich immer und immer wieder! Ihr schafft es aus einem "langweiligen" IT-Problem, einen unglaublich kurzen Krimi zu machen. @Dominik Bärlocher unglaublich gut geschrieben! Hat wirklich spass gemacht zu lesen... mehr davon! Thumbsup!

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User mathowohlen

Liebe Engineers.
Herzliche Gratulation zur Rettung letzten Freitag.
Ein sehr interessanter und amüsanter Artikel, habe teilweise Gänsehaut während dem Lesen.
Danke für den Blick hinter die Kulissen und ein "Big Up" an Enes Junior :-).
Ihr habt echt super Arbeit geleistet!

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User querdenker

Noch ein paar Anreize:
- "Activ Actic" DB Cluster auf lokalen NVMe SSDs (kein SAN)
- Ansible und Docker zur dynamischen Installation
- Kubernetes und Prometheus zur Überwachung/Monitoring
- Mehr statischer Content und Caching Server wie Nginx oder Varnish
- Linux/FreeBSD

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User kafkef5050

sehr interessant, gibt es eigentlich auch eine zahl der verkauften smartphones am 24.11. ?

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Platinum22

Und ich habs verpasst :(
Hatte mich zu stark auf die Sonderseite mit den Deals fokussiert, aber da waren die Deals doch eher schwach...

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

das würde mich auch Wundern nehmen in Anbetracht dessen dass Digitec meint es könne bis zu drei Wochen dauern bis ich mein neues Smartphone überhaupt abholen kann... :) hat irgendjemand überhaupt bis jetzt sein neues Gerät schon gekriegt?

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User donutmaker

Mir wurde am Telefon gesagt, dass mehr als 8000 Handy-Verträge abgschlossen wurden.!

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

whoa, das ist ja echt beeindruckend!! Hut ab Digitec!

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Peut-on avoir cet article en français s'il-vous-plaît ?
Merci !

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anne Chapuis

Bonjour,
Merci pour votre commenaire. Nous allonsnous occuper de la traduction du texte :)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anne Chapuis

Voilà, l'article est traduit. :) Bonne lecture

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Au top, merci !

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Merci pour la traduction, c'est un peu écris dans un style "descriptif" mais le contenu est intéressant.En tant que Suisse-romand j'apprécie vos efforts de traduction et l'esprit Digitec qui colle bien aux produit high-tech que vous vendez.

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User tobi.schoergi

Besti Artikel woni han dörfe lese vo eu!
Mängisch isch es ide IT so das mer eifach Muet zeige muss und was wage. Gratz Digitec das es klappt het ^^

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User gautierboder

Merci, ich habe am Freitag auf Twitter nach ein solchem Artikel gefragt. Hier ist es und sogar interessant. Ich werde es weiter leiten. A schöne Tag an alle. Gruss aus ein software architect der solchem hype launches lebt jedem Jahr ;)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User YvesMundorff

Sehr Hands-On. Engineering wäre: Szenarien vorher mit einem L&P Test durchzuspielen und ev. schon eine Redis-Cloud für den Notfall aufbauen. Das war wohl das Glück des Tüchtigen. ;-)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User simonk.ch

Wäre ich Engineer bei Digitec würde ich mich dafür schämen, wenn ich einer zu erwartenden Lastspitze mit "ich hoffe die Server schaffen das" begegnet wäre. Als Incident Management wäre es ein guter Job gewesen.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User J.Fietz

Sehr interessanter Bericht, hat mir sehr gefallen ihn durchzulesen.

Jedoch waren die sales immernoch sehr schwach.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Leider ist auf dem Request-Count-Diagramm nicht ersichtlich, wie viele rpm es überhaupt waren. Könnt ihr das noch nachliefern oder ist das ein Geschäftsgeheimnis?

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User fbausk

Schade das es hier nur um Engineer und ein wenig um die Shop Mitarbeiter geht. Ich könnte mir vorstellen das es grade in der Logistik viel los war und dies wird weder bei Digitec noch bei Galaxus erwähnt.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User mjuon01

Nun, es gäbe renommierte Cloud Anbieter in der Schweiz, welche Euch volle Elastizität der Serverresourcen (stichwort CloudFoundry) garantieren würden und bezahlen müsste Digitec bloss den tatsächlichen CPU und RAM Verbrauch, und dies minutengenau.
Aber eben wäre ist ja schon fast ein Outsourcing und das ist ja per se "böse"

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User andyforpresident

Hey Digitec, ihr beweist hier, das ihr Incident Mangement im Griff habt und auch mal kurzfristig ungeteste Software einsetzt!
Was ich jedoch nicht verstehe ist, das ihr nicht die ersten mit diesem Problem seit, siehe Amazon, dank ihren Black Friday Crashs gibts nun public Clouds, ;)

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User jeje1307

Merci de partager ce genre d'information, c'est super intérressant et nous aide a comprendre bien des choses =D

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User alvarogoncalves

Interesting report and a brillant engineering team behind but the only way to secure these kinds of peeks is to run everything on AWS. The big companies are all running their business on AWS and not only for scalability reasons but also from a time-to-market perpective. Don't hesitate to ping me.

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User marchand.didier

Merci au ingénieurs. Cela ma permit de profiter des offres meme si maintenant ca bloque plus loin au niveau des contrats car trop de demande :-)

04.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User flo_1984

Interessanter Artikel, wenn auch ohne Daten... Wieviele User wären Online? Wieviele Hits pro sec.... Fakt ist auch das digitec der einzige Shop war welcher black Friday für Stunden nicht erreichbar war.....

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User J.W.Petrus

Hätte das Ding zu einem Cyber-Thriller. Super Arbeit, auch wenn etwas waghalsig.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User dominik-st

Echt interessanter Bericht. Wäre gerne dabei gewesen um das Spektakel live mitzuverfolgen xD

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Gut geschriebener und interessanter Bericht. Als junger Entwickler hätte es mich noch interessiert, Min, Avg und Max der User / Requests zu erfahren, welche Rechenleistung hinter eurer "Shop Farm" steckt und welche weiteren Cache Systeme bereits implementiert sind. Kann natürlich auch verstehen, wenn ihr diese Daten wegen der konkurrenz nicht veröffentlich.

03.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User mikeoff.off

Ach ja und der vergleich mit ddos hinkt. Ddos will schaden anrichten kunden wollen kaufen und vergleichen. Und da viele kunden jetzt verärgert sind hat der schwarze freitag für digitec einen einen schwarzen nach geschmak. Darum an so einem tag nie was beim liblings online händler bestellen. ;-)

04.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User XxEDGExX

Good stuff lads, be sure to convince the managers to set this up permanently :)

04.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User frankpotth

Magazine Luiza hat die Black-Friday-Request-Tsunami ebenfalls interessant gelöst : youtube.com/watch?v=FUPHU0O...

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User noah.zimmermann

Danke für eure Arbeit! Euer Team hat nach dem BFCM-Weekend eindeutig Ferien verdient :) Mich würde interessieren, wie viel Prozent eures Jahresumsatzes Ihr dieses Wochenende gemacht habt. Zwischen den Bestellnummern von Freitagmorgen und heute Abend sind immerhin 130'644 Bestellungen!

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User _tdc_

Zum glück ist der erste Redis Versuch fehlgeschlagen! Unter Windows hab ich Redis nur 1 Mal benutzt. Empfehle ich klar nicht! Auch bei der C# Library aufpassen, hab im Stress eine erwischt die nach 5000 Requests eine Lizenz wollte :)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User noSuchUsername

Da steht auch nirgends Windows, nur Microsoft. :) Habe erst kürzlich einen Linux-Cluster für ein paar Tage bei Microsoft gemietet; zugegebenermassen ein komisches Gefühl.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User _tdc_

Ich bin bei "Auf einem Managed Server Microsofts" automatisch von einem Windows ausgegangen :) Mein Fehler.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Anonymous

Schön geschrieben, aber als Kunde nützt mir das nichts. Fakt ist; ich konnte meine gewünschten Artikel nicht bestellen weil ihr eure IT nicht im Griff habt. Mehr gibt es hierzu nicht zu sagen. Macht es bitte nächstes Jahr besser oder lasst es sein.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User cuongphan3

Extrem schlecht vorbereitet. Digitec wusste klar im Voraus, dass am Black Friday ein Ansturm gibt und danach für Bearbeitung, Versand etc. viel Ressourcen benötigt wird. Stattdessen warten wir jetzt Tageweise bis Digitec endlich alles aufgearbeitet hat und nachkommt mit den Lieferungen...

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User dearheart

I am fan of Digitec, but the day was only partly saved,. I was online like others, but you not. For a company that is "digital"=Digitec, and working in IT, I must say I am disappointed. I am a fan of Digitec and use it each day and have done so since they started.
BUT: Sorry - not good enough.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User rschumacher17

…und heute liegt der Adventskalender flach? ;-))

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User rschumacher17

hmmm... etwas genauer:
Digitec-Adventskalender: die URL funktioniert auf MacOS (High Sierra) mit Firefox, aber weder mit Safari noch Chrome... Sowie auf dem iPad (Safari auf iOS) auch nicht.
Galaxus-Adventskalender läuft nirgends auf MacOS / iOS, weder Safari Firefox noch Chrome.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User rschumacher17

Zur story selbst (sorry fürs off-topic oben): sehr guter Artikel, interessante Einsichten was bei IT Operations so abgehen kann.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User alebij

Vous avez pas de load balancing?

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User didiragni1104

J'avoue, mais bravo pour cette journée magnifique, si vous le voulez, vous pouvez m'envoyer un cadeau. Merci

06.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User L1f374k3r

Die Seite war den ganzen Tag off. Auch die Deals waren eher schlecht... nichts verpasst :)!

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Digitalus

OHNE DATEN oder ZAHLEN ? (Der Black Friday ist ja in den USA erfunden worden,in den1970er Jahren,manche sagen in den 60er.Ist ja egal.Aber das sich Kunden geprügelt haben und ganze Geschäfte demoliert haben ,kommt euch allen das bekannt vor?Seit JAHRZENTEN .)Bereite Dich auf schlimmste vor,und hoffe aufs beste!Besonders als ON LINE SHOP!Alle Teams nach James Bond-Filmen benannt,als Ausserwählte?Eine Nation hämmert gegen eine Webseite,CH,was sollen China oder USA,D,GB,Fr,Sp,Rus.?

03.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Digitalus

Sagen?

03.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User abossard

Hört sich an wie eine Zeitreise ins Jahr 2001 :-P
Einerseits kann man mit Load Tests sich vorbereiten auf solche Zeiten, andererseits kann Caching schon viel früher beginnen, als wenn der Web Request in den Applikationsserver kommt, z.B. mit Varnish.
Es hilft wenn man verschiedene APIs/Services hat

03.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User resal1510

Toujours autant passionnantes et intéressantes les petites histoires des ingénieurs de Digitec, j'adore

05.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User leo.hauser

Merci pour cet article vraiment intéressant. C'est vraiment super de pouvoir voir le "background" de Digitec grâce à ce genre d'article.

06.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User beginner99

Der Bericht ist ein sehr gutes Beispiel wie man es nicht macht. Cowboy-Programmieren sondergleichen.Wenn man in Not was basteln muss und ungetestet produktiv setzt, dann ist das der beste Hinweis das ernsthaft was schief läuft in der ganzen Organisation.

06.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User Loic

Hard to believe that actually this kind of surge are not predictable and caching are NOT tested before black Friday. I will seriously consider planning a little bit better next time

07.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User mikeoff.off

ich weis ja nicht eine down time an so einem tag ganz schlecht wie viel kohle habt ihr in den 17 sek. verloren. In zeiten von cloud und AWS | Amazon Elastic Compute Cloud darf so was eigentlich nicht passiren. was kostet aws von amazon ein paar sent pro cpu und mb? ich häte sie alle raus geworfen!!!!

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User alvarogoncalves

Fully agree. AWS is there to cope with these kind of scalability issues.

02.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User visocane

Ja bin auch sehr Stolz auf euch. Das Falsche Produkt im Onlineshop mit einem anderen zu verknüpfen und dafür nichtmal gerade zu stehen ist schon schwach. Jetzt hab ich einen Stuhl den ich nicht bestellt hab und ich soll den Fehler von euch ausbaden. Danke euch. Grüsse ein treuer Kunde. Sarkasmus aus

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User fumo

Schöne Diagramme, so ohne Zahlen die beweisen ob es technisch gerechtfertigt ist. Könnt ihr bitte die genauen Zugriffszahlen angeben? Ohne die klingt das hier alles nur nach faule Ausrede ;)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User alain1989

Es geht hier um die Erzählung was technisch passiert ist und nicht um eine Rechtfertigung. Digitec wird alleine schon aus Konkurrenztechnischen Gründen keine genauen Daten bei solchen Daten angeben.
Ob du den Zahlen und Statistiken glaubst ist jedem selber überlassen.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User fumo

Jaja immer die konkurrenztechnischen Gründen, als würde einer der Konkurrenten auch nur einen kleinen Vorteil davon haben wenn sie wissen wie viele Zugriffe es gab...
Das hier ist eine Rechtfertigung und ein armseliger Versuch die downtime nicht absichtlich aussehen zu lassen. Wir leben in einen Land in dem das Geschehene aufgrund der Einwohnerzahl praktisch unmöglich ist und solange keine Zahlen vorliegen ist jeder der es glaubt nur naiv.

01.12.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.

User TheRev

Naja so Professionell kann der Engineer ja irgendwie nicht seit mit mehr als 17 Sekunden gerechnet.. Ich hätte jetzt mit weniger gerechnet..
Aber naja, war ja damals nicht gut genug für Digitec ;)

29.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User fbausk

Du sprichst mir aus der Seele.

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User TheRev

Danke für die -'e ohne Begründung, Zeigt wie viel Fachkentnisse Ihr habt die -drücken ohne Begründung :)
Vorallem Experimentieren an einem Live-System = Bastelstunde..
Heisst Wohl bei Digitec:
Wir Basteln uns einen Server ;)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Immernoch angepisst dass du nicht genommen wurdest? Weil mit "Fachkenntniss" hatte dein Rant bis jetzt ja nichts zu tun ;-)

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User TheRev

Angepisst nicht jedoch sieht man wie die Personen da arbeiten :)
Und ja ich weiss, mehrere MCSA / MCSE hat man keine Ahnung :) Auch Linux Zertifizierungen sind vorhanden aber auch egal, man sieht auch wie die Community hier ist - Kinder..

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

User Anonymous

Ob und wieviel Ahnung du hast, weiss ich nicht, aber bisher hast du ausser abschätzigen Bemerkungen nichts beigetragen. "Fachkenntnisse" ja schon gar nicht. Das kenne ich von Spezialisten in der IT sonst gewöhnlich anders. Die argumentieren technisch und mit Logik und nicht einfach ad-hominem...

30.11.2017
Signaler un abus

Vous devez être connecté pour signaler un abus.

Vous devez être connecté pour répondre à un commentaire.


Veuillez vous connecter.

Vous devez être connecté pour écrire un commentaire.

Corporate logo