For et års tid siden fik jeg etableret en mast på grunden som familien Kroman har erhvervet. Det er ikke den højeste mast, men den har fint kig til hele HF Sølyst.
Tirsdag eftermiddag røg linket til masten dog. Fejlen var en Powerbridge som er “stået af”. Masser af strøm men den ville ikke linke. Det betød at 8-9 huse i Sølyst røg offline.
Så den er blevet udskiftet idag, så de kom online igen efter godt et døgn. Valget blev en LiteBeam med de nye AC standarder, så det fik farten lidt op for se udvalgte brugere i Sølyst.
Så skete det som ikke må ske:
I forbindelse med byggeriet af det nye militærakademi på Sylbækvej, er de igang med en masse gravearbejde. Og så skete det… Det lykkedes dem at grave fiberen til Søvang over nu til morgen kl 07.30, da en entreprenør ‘fik fat i kablet’ ved en fejl (de undskylder sig så med at ‘det ligger i en forkert højde’ og ‘der er ikke brugt dækplade ordentligt’ og flere andre undskyldinger)… Men faktum er at kablet er brudt….
Fiberen/forbindelsen er fejlmeldt til TDC, og de har lovet at der kommer en fiber-splejse-vogn ud til os senest ved 14-tiden, hvorefter reparationen kan gå igang…
Der bliver opdateret når der er nyt i sagen….
Update kl 12.50: Så kører det hele igen, fiberen er fixet og vi er online 🙂
God weekend!
… også selvom det er 14 minutter om natten til mandag….
Fra kl 00.56 til 01.10 var TDC fiberen nede i Søvang. Det betød at alle (undtagen kunder i midtbyen) var offline i et kvarterstid. Beklager eventuelt bøvl, men håber at det gik….
Lørdag aften røg godt en tredjedel af Søvangs haver offline. (29 haver, mere præcist)
Der kom dog forbløffende få “Hvad sker der?”-mails? 🙂
Måske det skete da Jazz-drengene var gået igang med at sprede gode jazzede vibrationer i Søvang?
Fejlen blev lokaliseret til en POE-switch i Masteskabet ved Duehuset som var stået af…
Heldigvis var der en ny på lager, som kunne gøres klar.
Det drillede dog noget med at få VLAN opsætningen til at fungere…
Så 29 haver var uden net fra 20.25 til 23.30…
Fra morgenstunden i dag (lidt efter kl. 8) gik al strøm i HF Søvang.
Årsagen var at NRGi skulle fixe deres installationer, og derfor lukkede hele vores område ned.
Konsekvensen af afbrydelsen var at Hotspot’s internet gik ned (efter cirka 15-20 minutter hvor selve netforbindelsen blev holdt kørende på strøm-backup/UPS).
Klokken ca. 11.45 kom alting op og køre igen, uden at der er sket skade på udstyret eller andet.
Så alle skulle gerne have ‘helt almindeligt internet’ igen nu!
Ideen med trådløs deling af internet i haveforeningen, har spredt sig til Amager. I løbet af Vinteren har Mads været konsulent for Haveforeningen Amager Strand, med planlægning af et tilsvarende netværk, som vores i Søvang.
Det er blevet til rigtig mange mails frem og tilbage, og i starten af marts var Mads, sammen med vores übernörd Christian, på tur til Amager, for at sætte alt grejet op.
Haveforeningen har selv stået etablere en gigabit fiberforbindelse udefra, samt for at rejse to master, og lægge en fiber mellem de to.
Ved besøget var vi så med lift oppe og sætte 2 x 3 antenner op i masterne (og nyde udsigten over haveforeningen i Øresund)
Vi blev ikke helt færdige, da der dels var lidt ekstra praktiske udfordringer og forsinkelser, og dels på grund af problemer med firmwaren på alle have/klient-radioerne. Så efter 2 dage på Amager måtte Mads vende hjem med nogle radioer, for at teste og finde løsninger.
Løsningen er fundet, og de prøver lige nu selv at få opgraderet på radioerne, og lagt de rette settings på, så de kan komme igang. De har “forhåndssolgt” 65 forbindelser som skal køre fra 1. april.
Må ærligt indrømme at jeg er lidt misundelig på deres sprit nye grej, som kører alle de nyeste (og hurtigste) standarder..
Mandag den 26/12, altså 2. juledag, valgte hovedrouteren (også kaldet CloudCoreRouter) at ‘stå af’ tidligt om morgenen (05:58)
Resultatet var at fiberforbindelsen på stedet røg offline (inkl. diverse alarm-opkoblinger etc).
Heldigvis virkede den ‘fall back’ opsætning som er lavet. Hvilket betød at de fleste kunder faktisk opretholdt et lille hul igennem ud til internet. Metoden er at hvis der ikke er internetforbindelse gennem hovedrouteren, så søger trafikken, via et ‘long distance link’ ud til HF Søvang og den fiber som kører der. Resultatet er at der fortsat er internet-forbindelse, men at hastigheden bliver meget ringe (cirka 2 til 5 mbit). Det er ikke muligt at få bedre hastighed på det link, men prioritering er også at “et lille hul igennem er meget meget bedre end ingenting”.
Da nedbruddet blev konstateret i løbet af formiddagen (hvor Mads sad på Amager til privat julearrangemenet), blev forbindelsen fejlmeldt til TDC.
Problemet viste sig så at være routeren der var gået i ged, så TDC gik fri denne gang 🙂
Efter en udskiftning af routeren, kom alle online på almindelig vis igen, 3. juledag kl. cirka 15:30
Tirsdag morgen fik jeg de første meldinger fra brugere af Hotspots net i midtbyen: “Der er nogle hjemmesider vi pludseligt ikke kan komme ind på!”. Og der var eksempler som ikea.com, ebay.com, men også tjenester som MailChimp og Domaintools.com.
Senere på dagen fik jeg så en mail fra TDC CSIRT som meddelte at der havde været forsøg på hacking FRA VORES IP!
Min første tanke var WHAT?… Sidder der nogle på vores forbindelse og forsøger at hacke hjemmesider??
Det blev hurtigt klart at blokering som brugere oplevede var en direkte konsekvens af at der var konstateret ‘farlig trafik’ fra vores IP. Og nogle af de store spillere på nettet, har en aftale med AKAMAI som skanner al trafik til deres sider. Og Akamai havde valgt at blokere os meget hurtigt.
Da jeg endeligt fandt dem, kunne jeg blot konstatere at deres politik er “Hvis du bliver blokeret fra nogle af vores kunders hjemmesider, så skal du henvende dig til dem, så de kan bede os om at åbne igen. Vi snakker aldrig med vores kunders kunder….” Så logikken er at jeg altså skulle kontakte både IKEA, EBAY, MailChimp, Domaintools o.s.v. Og oplyse dem om problemet, og samtidigt anmode om at blive ‘De-listed’, altså få fjernet blokeringen.
Det har vist sig endog MEGET svært at få hul igennem til ‘de ansvarlige for hjemmesiden’ de fleste steder. Ebay har overhovedet ikke svaret på de 4 mails jeg har sendt til 4 forskellige adresser. Ikea har heller ikke svaret, så jeg havde fat i deres telefon-kundeservice, som nu på 4 døgn prøver at finde ud af hvem de skal sende mig videre til… Mailchimp var dog særdeles flinke til at svare, og jeg kunne derigennem få lidt flere detaljer om hvordanog hvorfor blokering var kommet op. De hjalp også med at konstatere at det vi oplevede var en ‘Reputation block’, som er knap så slem som en ‘IP block’ der er næste umulig at få ophævet.
Siden tirsdag har jeg (med hjælp fra bla. Carl på X og Kasper på Brobjerg) forsøgt at gennem-analysere netværkstrafikken i vores hotspot-setup. Og (heldigvis) har vi ikke kunnet finde noget der kunne være årsag til balladen…
I første mail fra TDC stod der et par web-adresser som tilsyneladende var forsøgt hacket. Af nysgerrighed prøvede jeg, via en maskine der er på en helt anden ip (under NiaNet), at tilgå siden. Der gik cirka 30 miutter, så fik jeg en mail fra NiaNet om der ‘Der er forsøgt hacking fra jeres IP’! Jeg var temmelig overrasket, da det eneste jeg havde gjort var at åbne en adrdese (i stil med www.domæne.tdl/wp-admin) jeg kiggede på siden, thats all. Ikke en eneste gang forsøgte jeg at logge ind. Alligevel er det besøg, af internationale overvågningstjenester, blevet kategoriseret som ‘forsøg på hacking’…. Langt ude!
Og det fik mig til at ‘slå koldt vand i blodet’, for hvis der ikke skal mere til at trigge en ‘international advarsel’, så er det slet ikke sikkert at vi overhovedet har et problem…
Jeg har haft en dialog med TDC CSIRT, hvor jeg har understreget at ‘vi har gennemgået netværket og der er ikke længere et problem’. Men også de kommenterede at det kan være temmeligt bøvlet at blive ‘de-listed’ når man først er blevet blacklistet.
Så løsningen er blevet at vi har fået åbnet et par nye ip-adresser, som vi nu kommer på nettet med.
Og dermed er al blokering også ophævet.
Det har været lidt af en rejse… Først at tro at ‘fanden var løs’, så at sidde i timer og analysere log-filer, for til sidst at konstatere at der sandsynligvis er en storm i et glas vand, og løsningen endte med at være at vi har flyttet vores netværk på nye IP-adresser…
Men fra mandag morgen har alt været i bedring, og nu skulle alting gerne køre helt normalt.
Skulle der være tvivl om noget, så kontakt endeligt Mads, så finder vi en løsning!
I efteråret kørte nettet til kontorfællesskabet OPGANGEN lidt ustabilt, og ikke helt med den hastighed jeg havde lovet…(30/30mbit)
For godt en måned siden skiftede jeg derfor radioerne ud i det link som leverer nettet til Gellerup, og nu kører det typisk 50/60mbit, sommetider endda endnu hurtigere 🙂
Og så gik det alligevel galt i dag 🙁
Jeg blev i formiddags kontaktet, da nettet var gået ned. Jeg fik Esmat, som var på sit kontor, til at prøve et par ting pr. distance, uden at det hjalp. Jeg dobbelt-tjekkede alt hvad jeg kunne ‘udefra’ men stadig uden held…
Da jeg havde et vigtigt møde fra 12-15, blev det først kort efter kl 15 at jeg fik tid til at kigge forbi. Og så kunne jeg meget hurtigt konstatere årsagen til problemet…
I hjørnelejligheden sidder internet-radioen/parabolen på altanen. Og ledningen som sidder ind i parabolen var ganske enkelt blevet ‘voldet’… Altså trukket meget hårdt i.
Det betød at ledningerne i ethernet-kablet var blevet trukket i stykker og ledningen var stukket løst ind i stikket, så det umiddelbart så korrekt ud… Men som det kan ses på fotoet herunder, så var skaden sket….
Jeg har nu sat et nyt stik på ledningen, og flyttet parabolen til et beslag under vinduet, forhåbentligt monteret således at den samme fejl ikke kan blive gentaget…. Skulle uheldet ske, så kontakt mig asap, så vi kan få det fikset.
Så altså:
Årsagen var at ledningen var blevet trukket ud af stikket i formiddag. Og her fra 17-tiden har det hele kørt normalt igen!
Natten mellem torsdag og fredag gik strømmen desværre helt i Gøglerskolens serverrum.
Det betød at alle på ‘bylinket’ gik offline indtil strømmen var genskabt.
Det viste sig at være noget udendørs ventilation, som var sat på edb-strømmen i huset. Og tilmed var der så gået overgang i det… Resultatet blev altså at væsentlige dele af skolen (og serverrummet) henlå totalt offline hele formiddagen. Det tog 2 elektrikere fra VERDO 3-4 timer at få fundet fejlen, og derefter genetableret strømmen.
Beklager meget det manglende net…. Super træls!
Men det kom op igen over middag, og har hørt stabilt siden da….
