Portrett av Kristoffer Gjøsund
Portrett av Kristoffer Gjøsund
Laster referanser...
- GET Academy

Kristoffer Gjøsund

LogicMeetsCreativeSolutions

Forener min akademiske reise fra bygg, helse og IT. Til å skape løsninger gjennom samarbeid. For meg er utfordringer en felles reise

Sosial media Linker / Kontakt

Forbedringer av nettside skanning

Publisert: project Portfolio

Tidligere var prosessen med å hente informasjon både treg og full av støy. Ved å lære verktøyet å kjenne igjen og fjerne uinteressant innhold automatisk, leveres nå ferdigvaskede data. Med evnen til å gjøre mange oppgaver samtidig og tåle små avbrudd, spares det mye tid. I tillegg er feil med manglende sider løst, slik at alt alltid er klart til bruk.

Skrevet i samarbeid med KI - Gemini 3.7 Flash

Program informasjon

Teknologi - Python Verktøy - TypeScript, KI

Dagens Aktiviteter

  • Oppgradert verktøyet slik at det nå automatisk kjenner igjen og fjerner uinteressant informasjon og "støy" fra nettsider.
  • Innført nye metoder som renser nettsidene for unødvendige elementer før informasjonen blir lagret.
  • Gjort det mulig for verktøyet å hente informasjon fra mange steder samtidig, i stedet for å måtte vente på én og én oppgave.
  • Forsterket systemet slik at det tåler små avbrudd eller feilmeldinger fra nettsider uten at hele prosessen stopper opp.
  • Løst problemet med manglende sider ved å sørge for at nødvendige filer blir laget automatisk rett før nettsiden ferdigstilles.
  • Sikret at sluttresultatet består av ferdigvaskede data med høy nøyaktighet, noe som fjerner behovet for manuelt etterarbeid.

Motivasjon & Energi - 10 / 10

Dagen er så fin den kan bli !

Utfordring & Løsninger

Verktøyet jeg bruker for å hente informasjon fra nettsiden var tregt og tok ofte med seg mye unødvendig "støy" fra nettsiden, som krevde mye tid på å vaske dataene i etterkant.

Oppgaven var å automatisere denne prosessen slik at jeg sitter igjen med informasjon som har verdi for slutt brukeren.

  • Jeg har oppgradert logikken i innsamlingsverktøyet mitt slik at det nå automatisk kjenner igjen og filtrerer bort uinteressant innhold.
  • Jeg har lagt til nye metoder for å vaske nettsidene for unødvendige elementer før dataene lagres.
  • Jeg har gjort det mulig for verktøyet å utføre mange innsamlinger samtidig i stedet for å måtte vente på én og én, noe som øker farten voldsomt.
  • Til slutt så fikset jeg feilen med at sidene ikke fantes ved å auto genenere filene før kompilering og bygging av nettsiden.

Jeg får nå levert ferdig vaskede data på mye kortere tid. Dette øker kvaliteten på informasjonen jeg leverer uten at jeg trenger å bruke tid på manuelt etterarbeid.