openOV Hackathon(s) 2025
199 views
Skip to first unread message
Stefan de Konink
Dec 17, 2024, 8:58:59 AM12/17/24
to ope...@googlegroups.com
Hoi,
Gezien het overweldigende succes van ons eerste openOV-congres dachten
we: "Laten we dat nog eens doen, maar dan daadwerkelijk wat gaan maken."
tl;dr https://forms.gle/PVLWxTXyGahRc3Ug6
Het plan in het kort.
Naar aanleiding van de presentatie die Eelke vorig jaar gaf hebben we
dus een large-language-model gekoppeld aan een reisplanner. De
overtreffende trap daarvan was spraakherkenning en -synthese om die
resultaten ook goed uit te spreken. Wij zijn eens gaan brainstormen.
Kernpunten en Probleemstellingen
Verbeteren van Spraakherkenning voor Reizigers
Uitdaging: De herkenning van specifieke halte- en straatnamen in
spraakopnames.
Oplossing: Fine-tunen van bestaande spraakmodellen (zoals Whisper) om
beter om te gaan met Nederlandse haltebenamingen, inclusief varianten
met achtergrondgeluid of dialecten.
Dataset: Vooraf opgenomen audio met verschillende variaties in kwaliteit
(microfoons, accenten, ruis).
Lokale vs Cloud Spraakherkenning
Uitdaging: Het gebruik van AI-modellen lokaal op mobiele apparaten om
afhankelijkheid van externe cloud-diensten te minimaliseren.
Voorstel: LLM’s lokaal inzetten voor snelle verwerking van spraakinvoer.
Kleine modellen presteren momenteel slechter voor het Nederlands.
Mogelijkheid: Gebruik maken van bestaande open-source modellen of
fine-tuning met hulp van externe partijen (zoals Radboud Universiteit).
Integratie van Reisplanner en LLM’s
Probleem: Het genereren van reisadviezen en verwerken van contextuele
vragen over dienstregelingen.
Oplossing: Tool Use-technieken waarbij een LLM kan communiceren met
specifieke APIs (bijv. halte-ID’s, GPS-coördinaten) om reisdata op te halen.
Agent Flow: Een iteratief proces om vragen stapsgewijs op te lossen
(bijvoorbeeld halte-ID ophalen → dienstregeling raadplegen).
Gebruiksvriendelijke Conversational Interfaces
Idee: Het ontwikkelen van een toegankelijke applicatie waarbij
gebruikers in natuurlijke taal reisvoorkeuren kunnen uitspreken.
Functionaliteiten: Personaliseren van routes (bijvoorbeeld: “Ik wil naar
Truus”). Opslaan van vaste locaties zoals thuis of werkadres. Aanpassen
aan gebruikers met spraak- of uitspraakproblemen (accenten, taalbarrières).
Historische Data en Voorspellingen
Mogelijkheid: Analyse van historische reisgegevens om populaire
reisroutes te voorspellen.
Gebruik: Lokale opslag van reisadviezen en statistische
waarschijnlijkheid toepassen op toekomstige bestemmingen.
Dit zou voor ons de start van een discussie zijn, zodat het geheel aan
kunnen scherpen, maar dat daarmee ook deuk in een pakje boter kunnen
slaan om toegankelijkheid van reisplanners echt te verbeteren.
--
Stefan
Gezien het overweldigende succes van ons eerste openOV-congres dachten
we: "Laten we dat nog eens doen, maar dan daadwerkelijk wat gaan maken."
tl;dr https://forms.gle/PVLWxTXyGahRc3Ug6
Het plan in het kort.
Naar aanleiding van de presentatie die Eelke vorig jaar gaf hebben we
dus een large-language-model gekoppeld aan een reisplanner. De
overtreffende trap daarvan was spraakherkenning en -synthese om die
resultaten ook goed uit te spreken. Wij zijn eens gaan brainstormen.
Kernpunten en Probleemstellingen
Verbeteren van Spraakherkenning voor Reizigers
Uitdaging: De herkenning van specifieke halte- en straatnamen in
spraakopnames.
Oplossing: Fine-tunen van bestaande spraakmodellen (zoals Whisper) om
beter om te gaan met Nederlandse haltebenamingen, inclusief varianten
met achtergrondgeluid of dialecten.
Dataset: Vooraf opgenomen audio met verschillende variaties in kwaliteit
(microfoons, accenten, ruis).
Lokale vs Cloud Spraakherkenning
Uitdaging: Het gebruik van AI-modellen lokaal op mobiele apparaten om
afhankelijkheid van externe cloud-diensten te minimaliseren.
Voorstel: LLM’s lokaal inzetten voor snelle verwerking van spraakinvoer.
Kleine modellen presteren momenteel slechter voor het Nederlands.
Mogelijkheid: Gebruik maken van bestaande open-source modellen of
fine-tuning met hulp van externe partijen (zoals Radboud Universiteit).
Integratie van Reisplanner en LLM’s
Probleem: Het genereren van reisadviezen en verwerken van contextuele
vragen over dienstregelingen.
Oplossing: Tool Use-technieken waarbij een LLM kan communiceren met
specifieke APIs (bijv. halte-ID’s, GPS-coördinaten) om reisdata op te halen.
Agent Flow: Een iteratief proces om vragen stapsgewijs op te lossen
(bijvoorbeeld halte-ID ophalen → dienstregeling raadplegen).
Gebruiksvriendelijke Conversational Interfaces
Idee: Het ontwikkelen van een toegankelijke applicatie waarbij
gebruikers in natuurlijke taal reisvoorkeuren kunnen uitspreken.
Functionaliteiten: Personaliseren van routes (bijvoorbeeld: “Ik wil naar
Truus”). Opslaan van vaste locaties zoals thuis of werkadres. Aanpassen
aan gebruikers met spraak- of uitspraakproblemen (accenten, taalbarrières).
Historische Data en Voorspellingen
Mogelijkheid: Analyse van historische reisgegevens om populaire
reisroutes te voorspellen.
Gebruik: Lokale opslag van reisadviezen en statistische
waarschijnlijkheid toepassen op toekomstige bestemmingen.
Dit zou voor ons de start van een discussie zijn, zodat het geheel aan
kunnen scherpen, maar dat daarmee ook deuk in een pakje boter kunnen
slaan om toegankelijkheid van reisplanners echt te verbeteren.
--
Stefan
Stefan de Konink
Jan 31, 2025, 10:53:22 AMJan 31
to ope...@googlegroups.com
Hoi!
Er zijn drie mensen die van mij nog geen e-mail hebben ontvangen omdat
ik de privacy instellingen van het Google formulier verkeerd had ingesteld.
Heb je nog geen mail ontvangen, en had je die wel verwacht? Stuur me
even persoonlijk een berichtje.
Denk je: "Een hackathon? Wat leuk! Wanneer?" Komende dinsdag in Den
Haag. https://forms.gle/PVLWxTXyGahRc3Ug6
--
Stefan
Er zijn drie mensen die van mij nog geen e-mail hebben ontvangen omdat
ik de privacy instellingen van het Google formulier verkeerd had ingesteld.
Heb je nog geen mail ontvangen, en had je die wel verwacht? Stuur me
even persoonlijk een berichtje.
Denk je: "Een hackathon? Wat leuk! Wanneer?" Komende dinsdag in Den
Haag. https://forms.gle/PVLWxTXyGahRc3Ug6
--
Stefan
Cristan Meijer
Feb 4, 2025, 3:51:58 AMFeb 4
to openov
Ik heb last-minute bedacht om mee te gaan doen en ben nu bij het provinciehuis. Gaat het nog door? Waar moet ik zijn?
Op vrijdag 31 januari 2025 om 16:53:22 UTC+1 schreef Stefan de Konink:
Sven Boor
Feb 4, 2025, 5:45:56 AMFeb 4
to openov
Link naar de OpenOV discord server https://discord.gg/sN96KVe3
Op dinsdag 4 februari 2025 om 09:51:58 UTC+1 schreef Cristan Meijer:
Reply all
Reply to author
Forward
0 new messages