Hvordan databasevedlikehold stengte Toyotas produktslinjer i to dager

Hvorfor oss?
VIKTIGE KONKLUSJONER

Dette er en advarselshistorie om vanlig vedlikehold som går galt: hvordan en liten del av systemet, i dette tilfellet rutinearbeid på en database, førte til at produktiviteten til tusenvis av arbeidere og 14 Toyota-fabrikker ble lammet.

Det skulle bare være en rutinemessig vedlikeholdssjekk – men i stedet førte det til nedleggelsen av 14 bilfabrikker i to hele dager.

Toyotas fabrikker stengte ned 28. august, noe som reduserte deres globale produksjon med en tredjedel, i et selskap kjent for sin produktive produksjon på stramme tidsfrister.

Årsaken? Vedlikehold av en database som gikk galt, og førte til at databasen overskred den tilgjengelige diskplassen – både på hovedserveren og på backupen.

Med databasen ute av drift, kunne ikke Toyota lenger gjøre de automatiserte forespørslene om forsyninger som var nødvendige for å produsere deres 13 500 biler per dag. Og i to dager stod 25 produksjonslinjer over de 14 fabrikkene tomme, ettersom ‘glippen’ betød at ferske bildeler ikke kunne bestilles fra leverandørene.

Det kunne kanskje ikke vært et problem – inntil du kombinerer det med selskapets berømte “Just In Time”-tilnærming, en nøye balansegang der du bare mottar varene eller råmaterialene du trenger rett før du trenger dem.

En fortelling om “Just In Time”

“Just In Time” (JIT) kan være en utmerket alliert for det riktige selskapet – det maksimerer lageromsetningen, noe som igjen har mange ringvirkninger for inntekter og kostnader.

Håndtert med presisjon og kirurgisk dyktighet, kan behovet for lagerplass og tilhørende kostnader, som personale og strøm, være en brøkdel av din daglige eller ukentlige produksjon. Men hvis balansen går feil i en eller annen retning, kan du enten ende opp med for mange råmaterialer og ingen steder å lagre dem, eller ingen råmaterialer og maskiner og ansatte som sitter uvirksomme.

Sistnevnte ser ut til å ha vært tilfelle hos Toyota, hvor Reuters beregner at en tredjedel av deres globale produksjon kom til stans. Nyhetsbyrået antyder også at, på grunn av JIT-strukturen, vil det være utfordrende å ta igjen den to-dagers mangelen.

En ekstremt effektiv produksjonslinje som jobber nær maksimal kapasitet hver dag, etterlater ikke mye rom for å øke produktiviteten, noe som betyr at Toyota kan være i ferd med å ta igjen forsinkede leveranser til kunder en stund.

Seiji Sugiura, en analytiker ved Tokai Tokyo Research Institute, fortalte U.S. News: “Produksjonen gikk for full kapasitet, så det er lite ekstra rom for produksjon.”

Utilstrekkelig diskplass

Så, hva skjedde på vedlikeholdssiden?

Toyota sa: “Systemfeilen ble forårsaket av utilgjengeligheten av noen flere servere som behandler delbestillinger.

“Om omstendighetene, ble vanlig vedlikeholdsarbeid utført 27. august, dagen før feilen oppsto. Under vedlikeholdsprosedyren ble data som hadde akkumulert i databasen slettet og organisert, og en feil oppsto på grunn av utilstrekkelig diskplass, noe som forårsaket at systemet stoppet.

“Siden disse serverne kjørte på samme system, oppsto en lignende feil i backupfunksjonen, og en overgang kunne ikke gjøres. Dette førte til suspensjon av operasjoner ved innenlandske anlegg.

“Systemet ble gjenopprettet etter at dataene ble overført til en server med større kapasitet 29. august, og fabrikkene gjenopptok drift den følgende dagen.

“Vi vil gjerne rapportere at vi har identifisert ovennevnte som den sanne årsaken. Tiltak har også blitt iverksatt ved å replikere og verifisere situasjonen.

“Vi vil også gjerne bekrefte at systemfeilen ikke ble forårsaket av et cyberangrep, og beklager til alle parter for eventuell bekymring dette kan ha forårsaket.”

Konklusjon

Det er en advarselshistorie om vanlig vedlikehold som går galt: hvordan en liten del av systemet, i dette tilfellet rutinemessig vedlikehold på en database, førte til nedleggelsen av hele produktiviteten til tusenvis av arbeidere og 14 fabrikker, med en sommerfugleffekt av forstyrrelser til leverandører, kunder, og til og med en midlertidig børsblip.

Ettersom verden beveger seg mot fordelene ved automatisering og kunstig intelligens (KI), er det en påminnelse om at jo flere sammenkoblede deler, jo verre kan en dominoeffekt være.

Likevel fungerer systemet bra for dem 99% av tiden, så motargumentet er en ode til effektivitet i gode tider.

Og selv om et selskap bare kan være så sterkt som sin svakeste komponent, er i det minste dette hullet i rammen tettet.

Toyota la til:

“Fremover vil vi gjennomgå våre vedlikeholdsprosedyrer og styrke våre anstrengelser for å forhindre en gjentakelse slik at vi kan levere så mange kjøretøyer til våre kunder så snart som mulig.”

Related Articles

Eddie Wrenn
Content Editor
Eddie Wrenn
Content Editor

Eddie Wrenn er en reporter og nyhetsredaktør som har jobbet i nasjonale og internasjonale nyhetsredaksjoner både i Storbritannia og Australia, med et spesielt fokus på siste nytt og rapportering innen vitenskap og teknologi. Han er for tiden basert i London, Storbritannia.