Driftsmeldinger fra IT - Side 23

Deploystudio har v?rt nede av ukjent ?rsak. Tjenesten er n? oppe igjen og vi vil unders?ke litt om ?rsaken til feilen, men vi mistenker gammel hardware.

F?rste melding om at tjenesten var nede kom 24.08.16 - 12.47, men problemet ble ikke oppdaget av oss f?r 25.08.16 - 15.00. Tiltak for ? hindre at dette skjer igjen er bedre overv?kning av maskinvare og kanskje litt bedre e-postrutiner av undertegnede.

Daniel H?isveen @ MLM

Flere kommandoer ble hengende i bofh. Har p?virket brukerinfo.uio.no og setting av nytt passord bla., dette har skjedd mange ganger i forrige 2 til 3 ukene.

Siste episode med den hengingen hadde ?rsakene identifisert, vi fattet en liten avviksrapport om dette her:  https://www.usit.uio.no/om/organisasjon/it-drift/avviksrapporter/2016/avvik_BOFH_heng-2016-09-05.html

Fakturasystemet (Basware IP) og Eomposterings-l?sningen tas ned for teknisk vedlikehold kl. 21:00 i dag tirsdag 23/08.

Beregnet nedetid ca 1 timer.

Det tr?dl?se nettet ved universitetet har for tiden problemer. Det jobbes med ? l?se problemet forl?pende. 

Beklager ulempen dette medf?rer. 

75% av tr?dl?snettet ble deaktivert l?rdag kveld klokken 19:15 (20 aug). ?rsaken antas v?re en feil i programvaren til kontrollerene og det ble senere p? kvelden installert en alternativ versjon for ? unng? gjentagelse.

Feilen ble oppdaget og l?st i l?pet av 15min, men brukere i perioden vil sannsynligvis opplevd ingen eller d?rlig kvalitet p? tjenesten.

Byttet av programvare p? kontrollerene klokken 21:35 f?rte til et nytt kort avbrudd, men etter 21:40 fungerte tjenesten som normalt.

bofh har blitt tatt ned for feils?king etter at flere kommandoer ble hengende.

Dette p?virker bofh og brukerinfo.uio.no.

Det er for tiden problemer med stabilitet p? noen nettsteder, og dette kan f?re til treghet og tjenesteavbrudd. Vi jobber med ? finne ?rsaken og beklager ulempen i mellomtiden.

Oppdatering: denne situasjonen skal n? v?re l?st.

Siden klk. 08 idag tidlig har Cerebrum hatt tr?bbel med ? kommunisere med AD tjenesten for ? opprette nye brukere.

Det jobbes for ? f? fikset snarest mulig.

Nettet har v?rt nede siden kl 7.30 10.august, det jobbes med ? f? l?st problemene.

Det er for tiden litt forsinkelse f?r endringer p? brukere i Cerebrum (brukeradministrasjonssystemet) blir synkronisert til AD p? grunn av store datamengder.

Vi ber om t?lmodighet og beklager ventetida.

En e-posttjener fikk problemer natt til l?rdag 7. august. I forbindelse med at den ble byttet ut, ble det gjort en feilkonfigurasjon som medf?rte at det feilaktig ble sendt ut returmeldinger i perioden 01:35 til 02:16 for e-post som var levert/behandlet tidligere p? dagen.

Vennligst se bort fra returmeldinger mottatt i dette tidsrommet, med mindre du har mottatt to returmeldinger for samme e-post.

En returmelding, eller ?bounce?, er en melding som genereres n?r en e-post du har sendt ikke kan leveres. Hvordan disse e-postene ser ut vil variere, men de feilaktig utsendte e-postene har ?mailer-daemon? som avsender og emnefeltet ?Mail delivery failed: returning message to sender?.

Det vil bli sendt informasjon direkte til de ber?rte i l?pet av dagen.

--

One of the mail servers stopped working during the night between Friday and Saturday. A misconfiguration when the servers was replaced resulted in...

Flere opplever problemer med passordbytte i brukerinfo. Det har v?rt problemer i varierende grad siden 3. august.

Problemene skyldes stor p?gang i tjenesten, samt ny metode for passordvalidering som gir litt mer last enn tidligere. Vi har gjort endringer i passordvalideringen som b?r hjelpe p? lasten.

Ved problemer ved endring av passord, vent litt og pr?v igjen senere. Ved vedvarende problemer, send gjerne epost til it-support@uio.no s? vi f?r oversikt over omfanget og kan sette inn ytterligere tiltak.

CurrentTime (ct.uio.no) er for tiden ikke tilgjengelig grunnet problemer. Det jobbes med ? f? tjenesten opp igjen.

15:15 - Problemet er l?st for de fleste brukerne, jobber med ? l?se floken for de som fremdeles har problemer.

Det grunnleggende problemet er n? l?st, men det kan v?re noen brukere som fremdeles f?r feilmelding. Disse bes ta kontakt med ct-drift@usit.uio.no for ? f? hjelp.

Igjen problemer med persons?k og enhetssider p? UiOs nettsted pga. at gruppetilh?righeter er borte i SAP.  Vi ser p? saken.

E-post til lister eller grupper som er basert p? organisasjonsstrukturen til UiO kan potensielt ikke bli levert, eller kun levert til noen mottakere. 

Man kan ogs? midlertidig miste tilgang til IT-ressurser, f.eks. nettsider eller XMPP-rom, dersom de er sperret ned basert p? organisasjonsstrukturen til UiO.

Bedre SAP-data ankom 16:40, det meste rettet seg antakelig opp innen en time deretter. Kanskje noe opprydning gjenst?r.

Det er for tiden problemer med gjestenettet. Uninett jobber med ? rette opp feilen.

Oppdatering 12:57: Problemet er l?st og nettet er tilgjengelig

Det er problemer med persons?k og enhetssider p? UiOs nettsted. Dette skyldes at mange gruppetilh?righeter er borte i SAP. Det jobbes med ? fikse feilen.

HR-portalen er utilgjengelig. Forventet tilgjengelig igjen ca 09:00

Statistikk-serverne patches, og oppdateres natt til fredag 15. Juli.

Dersom alt g?r etter planen er dette arbeidet ferdig ca. klokken 13:00 fredag. Arbeidet starter torsdag aften/kveld.

Det er for tiden problemer med utg?ende telefonsamtaler.

De fleste samtaler vil g? som normalt, men noen feiler.

Oppdatering: Det var en feil hos linjeleverand?ren som n? er l?st.

SAPUiO og HR-portalen er for ?yeblikket nede grunnet en teknisk feil. Det arbeides med en snarlig l?sning p? problemet.

Vi beklager ulempene feilen medf?rer.

Oppdatering kl.18:04: systemet og HR-portalen er tilgjengelige igjen.

Vi har hatt ett uventet driftsavbrudd som har rammet flere flere tjenester p? UiO, deriblant nettsider og telefon og en rekke andre tjenester. Vi jobber med saken og kommer med mer informasjon s? snart vi kan.

Oppdatert info:

Problemene hadde grunn i at LDAP-tjenerne hang/ble ustabile/utilgjengelige og dette p?virket dessverre veldig mange andre systemer som er avhenige av LDAP. ?rsaken til at LDAP hang var at ny en sentral loggfunksjonalitet ble skrudd p? og det dessverre ikke var tatt god h?yde for de store loggmengdene LDAP produserer.

I perioden det var problemer kan mail ha hatt problemer med ? g? gjennom, s? det kan feks v?re lurt ? sjekke utboksen i outlook.

?konomisystemet (OAPRD) tas ned for teknisk vedlikehold kl. 16:00 i dag tirsdag 21/6, beregnet nedetid ca 3 timer.

Vi har for ?yeblikket problemer med DeployStudio-serveren som gj?r at det ikke er mulig ? installere Macer med Netboot.

Dette burde ikke v?re et problem for alt for mange siden alle nye enheter installeres med Mobilt arbeidsrom.

Uansett jobber vi med saken og oppdaterer her s? snart vi har mer informasjon.

Hvis du har sp?rsm?l ta kontakt p? macadm@usit.uio.no.

Update 2016-06-16 11:20

Problemet er n? l?st og var p? grunn av hengende statd og rpcbind.

Det vil bli utf?rt noe teknisk vedlikehold i ?konomisystemet OAPRD, i kveld.
Dette kan medf?re at man blir kastet ut av OA og m? logge inn p? nytt.

Beklager evt. ulemper og kort varsel.

Automatikken som konfigurerer zabbix har failet og dette har f?rt til at mange maskiner har mistet sin overv?king. Vi jobber med saken og beklager de ulemper dette medf?rer.

Oppdatering: ?rsaken til problemet har blitt lokalisert og automatikken er i gang igjen. Det kommer til ? ta noen timer f?r alt blir registrert, konfigurert og p? plass igjen.

Det vil bli utf?rt teknisk vedlikehold p? Basware IP - Systemet for Fakturah?ndtering med eOmposteringsl?sningen
torsdag 02.06.2016 kl 21:00-22:00.

Noen brukere opplever at kiosken henger p? "Please wait for the Local Session Manager".

Det jobbes med ? f? l?st problemet.

Rundt 250 virtuelle servere som g?r p? clusteret esx-prod-a mistet nett i over 15 min fra ca.11:40, men alt skal v?re tilgjengelig igjen fra 11:55. Gi beskjed til virt-drift om evt. problemer som fremdeles vedvarer. 

Grunnet en systemfeil f?r du for ?yeblikket ikke tilgang til dine filer fra hjemmeomr?de via applikasjonen "Content".

Feilen gjelder for alle mobile enheter som kj?rer Content (fra tjenesten Mobilt arbeidsrom).

USIT jobber med ? rette opp i feilen.

Karine F. Ulleberg

Grunnet en feil i Nettskjema, kunne ikke inviterte personer svare p? skjemaer ved ? klikke p? lenken i epost mellom 18.mai kl 12.30 - 19.mai kl 09.24.

Feilen er fikset, men dersom en invitert en epostbruker klikket p? lenke for direkte innlogging i invitasjonseposten il?pet av denne perioden, vil brukeren n? f? beskjed om ? at "Lenken du har fulgt er ikke lenger gyldig."

Klikk is?fall p? knapp for ? f? tilsendt ny lenke p? epost.

Nettskjema beklager de ulemper dette medf?rer. 

Fors?k p? ? logge inn i Fronter resulterer i feilmeldingen "Authorization failed."

Det jobbes med ? f? l?st problemet.

N? sier Fronter selv at problemet skal v?re l?st: http://www.itslearning.eu/fronter-support

Update: The failed component has been replaced and the network is back up.

A central networking component in the HPC and research infrastructure domain has problems, making the servers and services unavailable.

Engineers are working towards a solution.

Vi har problemer med at nye Apple-enheter fra Atea og Imento ikke er registrert riktig i DEP-l?sningen fra Apple.

Vi jobber med leverand?rene og Apple for ? l?se problemet.

I mellomtiden er det bare ? fortsette ? registrere enheter i f?lge rutinene beskrevet her, men det kan dessverre ta litt lenger tid enn normalt f?r de kan leveres til sluttbruker

/tjenester/it/maskin/m-rom/drift-utvikling/dep_lokal_it.html

Oppdatering: Atea har registrert alle enheter, og alle ?pne RT-saker skal n? v?re lukket.

Problemene med RT som ikke fikk sendt mail er l?st. Dessverre m? mail som er fors?kt sendt i tidsrommet med probleme  sendes manuelt p? nytt da de ikke automatisk blir sendt p? nytt av RT. Beklager merarbeid dette p?f?rer enkelte.

RT har hatt problemer p? morgenen idag. Mellom 06:03 og 06:33 sluttet mail ? sendes fra RT med feilmeldingen "The RT System itself - Sending the previous mail has failed. Please contact your admin, they can find more details in the logs." . Vi regner med at dette er i orden om kun kort tid.

RT har hatt problemer p? morgenen idag. Mellom 06:03 og 06:33 sluttet mail ? sendes fra RT med feilmeldingen "The RT System itself - Sending the previous mail has failed. Please contact your admin, they can find more details in the logs." . Vi regner med at dette er i orden om kun kort tid.

Vi opplever for ?yeblikket at mange OS X-maskiner ikke f?r koblet til munki-serveren v?r. Det vil gj?re at brukere ikke f?r installert programmer og oppdateringer via ?Managed Software Center.app?.

Problemet jobbes med og oppdateres her etter hvert.

UPDATE 13:11: Problemet skyldes en fil som ikke ble oppdatert av automatikken p? serversiden. Feilen er rettet opp og alt burde begynne ? fungere igjen. Ta kontakt hvis det fortsatt oppleves problemer.

Det er i ?yeblikket forsinkelser p? levering til e-postlister - det jobbes med ? l?se problemet.

Oppdatert: De siste e-postene i k? ble levert cirka 19.15.

mvh Postmaster

Etter en feil p? server er n? SAP og HR-portalen oppe igjen.

Brukerkontoer som opprettes f?r ikke satt M: som stasjonsbokstav for hjemmeomr?de p? sin brukerkonto i Active Directory.

Det jobbes n? med ? identifisere hvor feilen er og deretter utbedre den.

Inntil problemet er l?st setter vi stasjonsbokstav til M: for nye brukere manuelt i Active Directory daglig.

Sp?rsm?l? Kontakt oss p? ad-drift@usit.uio.no

Statistikk-serverne patches, og oppdateres natt til onsdag 4. Mai.

Dersom alt g?r etter planen er dette arbeidet ferdig ca. klokken 12:00 onsdag morgen. Arbeidet starter tirsdag aften/kveld.

Grunnet teknisk oppgradering vil HR-portalen v?re utilgjengelig i tidsrommet 28. april kl. 16:00 - 29. april kl. 08:00.

Enkelte telefoner i dag f?r ikke mottatt telefoner fra numre utenfor UiO. Telenor jobber med saken, og forh?pentligvis vil det fungere igjen snart.

Merk at interne numre skal fungere fint.

----------------------------------------------------------------

Oppdatering tir 26.04.2016 kl. 0830

Feilen ble rettet ig?r kl. 14:30

Grunnet et problem med koblingen til folkeregisteret har flere studenter f?tt "Dsf>" som etternavn.

Samordna Opptak jobber med ? f? l?st dette. I mellomtiden kan de som er rammet av dette logge inn p? denne lenken, s? vil riktig navn legges inn hos UiO ved neste import.

Vi jobber med saken. Den nye lisensen skal aktivere ogs? gamle versjoner.

Kommer med mer info.

P? vegne av GDW

Oppdatering: Saken er n? l?st 2016-04-26

Samtlige Vortex-hoster l?ses for skriving i opptil to timer fra kl 17 (14/4) i forbindelse med prodsetting av ny versjon.

En del kontoer har blitt l?st i Active Directory grunnet et teknisk problem. Vi jobber med ? l?se saken.

Onsdag 30.mars, fom kl. 16 og ut kvelden

• Fakturasystemet (Basware IP) - det vil ikke v?re mulig ? kontere fakturaer, alt annet skal v?re mulig ? utf?re.

• Bestillingssystemet (Basware PM) - det vil ikke v?re mulig ? opprette bestillinger med tilh?rende kontering, alt annet skal v?re mulig ? utf?re.

• Web-rapporter som g?r direkte mot OA (sanntidsrapporter) vil ikke fungere i perioden systemet er nede.

Fredag 8.april, fom kl 16 og ut kvelden

(Fakturasystemet-IP og bestillingssystemet-PM vil ikke bli ber?rt)

Vi beklager de ulemper dette evt m?tte medf?re.

1. april fra kl. 14:15 vil Brukerinfo og glemt passord-tjenesten oppdateres. Vi forventer ? bruke en halvtimes tid. Skulle det v?re problemer, pr?v igjen senere.