[framacloud] Twiiiitter to RSS ?
4 views
Skip to first unread message
Gatien Bovyn
Jun 21, 2013, 4:25:43 PM6/21/13
to frama...@googlegroups.com
En prévision du futur lancement (officiel) de Framanews, que
pensez-vous de créer un flux RSS pour le Twitter de Framasoft en
plus du blog déjà disponible ?
L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu une petite bête en bêta ici : http://198.23.135.58:5000/
Supporte la création de flux pour les utilisateurs et les hashtags.
C'est du full python, sans base de données, ça devrait tourner sur à peu près tous les serveurs de Frama :-)...
Pour le code source, c'est par ici : Github
Asta
L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu une petite bête en bêta ici : http://198.23.135.58:5000/
Supporte la création de flux pour les utilisateurs et les hashtags.
C'est du full python, sans base de données, ça devrait tourner sur à peu près tous les serveurs de Frama :-)...
Pour le code source, c'est par ici : Github
Asta
Luc Didry
Jun 21, 2013, 5:22:43 PM6/21/13
to frama...@googlegroups.com
On 21/06/2013 22:25, Gatien Bovyn wrote:
> En prévision du futur lancement (officiel) de Framanews, que pensez-vous
> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
> disponible ?
>
> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
> une petite bête en bêta ici : http://198.23.135.58:5000/
> Supporte la création de flux pour les utilisateurs
> <http://198.23.135.58:5000/user/framasoft.xml> et les hashtags
> En prévision du futur lancement (officiel) de Framanews, que pensez-vous
> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
> disponible ?
>
> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
> une petite bête en bêta ici : http://198.23.135.58:5000/
> Supporte la création de flux pour les utilisateurs
> <http://198.23.135.58:5000/htag/framasoft.xml>.
>
> C'est du full python, sans base de données, ça devrait tourner sur à peu
> près tous les serveurs de Frama :-)...
> Pour le code source, c'est par ici : Github
> <https://github.com/Astalaseven/twitter-rss>
> C'est du full python, sans base de données, ça devrait tourner sur à peu
> près tous les serveurs de Frama :-)...
> Pour le code source, c'est par ici : Github
>
>
> Asta
>
C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir car je suivais 2/3 personnes
via l'API 1 et comme elle a disparu et ses flux rss…
Je serais assez pour mais il faudrait faire des tests de charge avant d'offrir ça au public (je me
méfie du public maintenant). J'ai testé avec un flux : ça prend 70 à 90% d'un thread (core i7, qui
poutre, toussa) et avec 5 flux rafraîchis en même temps, ça prend la même chose, ça redescend, ça
remonte, ça redescend, etc.
C'est pas multithreadé, donc au pire ça ne monopolise qu'un thread, mais les requêtes risquent de
s'accumuler et de prendre beaucoup de temps à être traité.
Je pense qu'un test avec 300 users/hashtag en simultané pour commencer permettrait de voir si ça
tient. Puis passer à 1000. Puis 3000. Je ne pense pas que ce soit un nombre déconnant.
Je viens de tester avec siege http://www.joedog.org/siege-home/). 2 siege (un user twitter différent
pour chacun) avec 3 utilisateurs simulés pour chacun (siege -c 3
http://0.0.0.0:5000/user/framaka.xml). Le serveur laisse tomber les connexions en timeout en moins
d'une minute :(
Bon, comme j'ai l'air un peu pessimiste, on va changer la note : c'est super bien fait ! Simple
d'installation, simple d'utilisation, tout ce qu'on peut en attendre. Je ne peux que te conseiller
d'aller en parler là : http://tt-rss.org/forum/viewtopic.php?t=2229, tu y seras bien accueilli je
pense ;) (mais évite de donner l'adresse de ton serveur hein ! C'est un jeu dangereux pour sa
charge). Pis une petite annonce LinuxFr serait pas mal non plus tiens.
C'est typiquement le type de logiciel qu'on fait tourner pour soi, mais surtout pas pour beaucoup de
monde (en l'état actuel, s'entend).
Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
Attends, je viens de relire ce que tu as proposé : en fait tu propose pas qu'on mette un serveur à
disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le fait !
Mes 2cts
--
Luc
http://www.fiat-tux.fr/
Internet n'est pas compliqué, Internet est ce que vous en faites.
Gatien Bovyn
Jun 21, 2013, 5:35:22 PM6/21/13
to frama...@googlegroups.com
On 21/06/13 23:22, Luc Didry wrote:
> On 21/06/2013 22:25, Gatien Bovyn wrote:
>> En prévision du futur lancement (officiel) de Framanews, que pensez-vous
>> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
>> disponible ?
>>
>> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
>> une petite bête en bêta ici : http://198.23.135.58:5000/
>> Supporte la création de flux pour les utilisateurs
>> <http://198.23.135.58:5000/user/framasoft.xml> et les hashtags
>> <http://198.23.135.58:5000/htag/framasoft.xml>.
>>
>> C'est du full python, sans base de données, ça devrait tourner sur à peu
>> près tous les serveurs de Frama :-)...
>> Pour le code source, c'est par ici : Github
>> <https://github.com/Astalaseven/twitter-rss>
>>
>>
>> Asta
>>
> C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir car je suivais 2/3 personnes
> via l'API 1 et comme elle a disparu et ses flux rss…
d'utile :-)
>
> Je serais assez pour mais il faudrait faire des tests de charge avant d'offrir ça au public (je me
> méfie du public maintenant). J'ai testé avec un flux : ça prend 70 à 90% d'un thread (core i7, qui
> poutre, toussa) et avec 5 flux rafraîchis en même temps, ça prend la même chose, ça redescend, ça
> remonte, ça redescend, etc.
> C'est pas multithreadé, donc au pire ça ne monopolise qu'un thread, mais les requêtes risquent de
> s'accumuler et de prendre beaucoup de temps à être traité.
> Je pense qu'un test avec 300 users/hashtag en simultané pour commencer permettrait de voir si ça
> tient. Puis passer à 1000. Puis 3000. Je ne pense pas que ce soit un nombre déconnant.
> Je viens de tester avec siege http://www.joedog.org/siege-home/). 2 siege (un user twitter différent
> pour chacun) avec 3 utilisateurs simulés pour chacun (siege -c 3
> http://0.0.0.0:5000/user/framaka.xml). Le serveur laisse tomber les connexions en timeout en moins
> d'une minute :(
En effet, j'ai regardé vite fait sur mon serveur, ça charge quand même
> Je serais assez pour mais il faudrait faire des tests de charge avant d'offrir ça au public (je me
> méfie du public maintenant). J'ai testé avec un flux : ça prend 70 à 90% d'un thread (core i7, qui
> poutre, toussa) et avec 5 flux rafraîchis en même temps, ça prend la même chose, ça redescend, ça
> remonte, ça redescend, etc.
> C'est pas multithreadé, donc au pire ça ne monopolise qu'un thread, mais les requêtes risquent de
> s'accumuler et de prendre beaucoup de temps à être traité.
> Je pense qu'un test avec 300 users/hashtag en simultané pour commencer permettrait de voir si ça
> tient. Puis passer à 1000. Puis 3000. Je ne pense pas que ce soit un nombre déconnant.
> Je viens de tester avec siege http://www.joedog.org/siege-home/). 2 siege (un user twitter différent
> pour chacun) avec 3 utilisateurs simulés pour chacun (siege -c 3
> http://0.0.0.0:5000/user/framaka.xml). Le serveur laisse tomber les connexions en timeout en moins
> d'une minute :(
pas mal. Et vu comme Framanews a dû mal à suivre, créer nos propres flux
rss en plus, ça va devenir très lourd à gérer...
>
> Bon, comme j'ai l'air un peu pessimiste, on va changer la note : c'est super bien fait ! Simple
> d'installation, simple d'utilisation, tout ce qu'on peut en attendre. Je ne peux que te conseiller
> d'aller en parler là : http://tt-rss.org/forum/viewtopic.php?t=2229, tu y seras bien accueilli je
> pense ;) (mais évite de donner l'adresse de ton serveur hein ! C'est un jeu dangereux pour sa
> charge). Pis une petite annonce LinuxFr serait pas mal non plus tiens.
> C'est typiquement le type de logiciel qu'on fait tourner pour soi, mais surtout pas pour beaucoup de
> monde (en l'état actuel, s'entend).
pourrait le garder en "privé" pour le moment (qu'il ne soit utilisé que
pour créer le flux RSS-Twitter de Framasoft) et ensuite pour les
utilisateurs de Franamews payant leur offrir ça en + (mais pour plus
tard donc, une fois que Framanews sera lancé, qu'on aura testé l'appli,
toussa)
Je comptais aussi envoyer un petit mail à Sebsauvage, ayant vu un de ces
liens sharlii précisé que ça semblait lui manquer, mais mon serveur ne
tiendra jamais si je lui envoie, je m'en doute (même pas 300Mo de RAM
dessus)
Une petite annonce linuxFr --> dis-le si tu veux ma mort :D
>
> Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
> avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
> exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
Ah je suis partant pour faire ça aussi :-) Certains sites proposent déjà
> Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
> avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
> exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
ce service, ça ne doit être trop horrible à coder (quoi, c'est horrible
de nettoyer le code à coups de regex ? :O)
>
> Attends, je viens de relire ce que tu as proposé : en fait tu propose pas qu'on mette un serveur à
> disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le fait !
>
> Mes 2cts
On peut aussi proposer pour d'autres frama-comptes, mais Framasoft
> Attends, je viens de relire ce que tu as proposé : en fait tu propose pas qu'on mette un serveur à
> disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le fait !
>
> Mes 2cts
serait un début :-) On peut aussi le faire sur le #hashtag 'framasoft'.
J'aimerais bien terminer le support des images... ah non, en fait il
reste tout à coder ! (/me retourne pleurer dans son coin)
Merci pour ton retour !
Luc Didry
Jun 21, 2013, 5:46:33 PM6/21/13
to frama...@googlegroups.com
payants :
* déjà il va se passer un certain temps avant d'être en mesure (compta,
déclaration, toussa) de proposer de payer
* il va falloir maintenir l'identification des gens qui payent sur ton
service (donc faire un système de clé ou je ne sais quoi)
* et s'il y a trop de gens qui payent ?
> Je comptais aussi envoyer un petit mail à Sebsauvage, ayant vu un de ces
> liens sharlii précisé que ça semblait lui manquer, mais mon serveur ne
> tiendra jamais si je lui envoie, je m'en doute (même pas 300Mo de RAM
> dessus)
> Une petite annonce linuxFr --> dis-le si tu veux ma mort :D
installer et à coder, mais que pour pas écrouler ton serveur, tu peux
juste pas fournir une adresse démo. Ou alors un serveur de démo avec la
conf apache (ou nginx) qui bloque sur @framasoft et #framasoft.
>>
>> Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
>> avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
>> exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
> Ah je suis partant pour faire ça aussi :-) Certains sites proposent déjà
> ce service, ça ne doit être trop horrible à coder (quoi, c'est horrible
> de nettoyer le code à coups de regex ? :O)
essayer d'y piocher des idées, on sait jamais.
>>
>> Attends, je viens de relire ce que tu as proposé : en fait tu propose pas qu'on mette un serveur à
>> disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le fait !
>>
>> Mes 2cts
> On peut aussi proposer pour d'autres frama-comptes, mais Framasoft
> serait un début :-) On peut aussi le faire sur le #hashtag 'framasoft'.
>
> J'aimerais bien terminer le support des images... ah non, en fait il
> reste tout à coder ! (/me retourne pleurer dans son coin)
>
> Merci pour ton retour !
>
>
Luc
http://www.fiat-tux.fr/
Envoyé depuis mon serveur de messagerie personnel.
Je suis le seul à pouvoir lire mon courrier. Et vous ?
Gatien Bovyn
Jun 21, 2013, 5:53:57 PM6/21/13
to frama...@googlegroups.com
>> Pas beaucoup de monde --> j'y ai pensé après avoir envoyé mon mail : on
>> pourrait le garder en "privé" pour le moment (qu'il ne soit utilisé que
>> pour créer le flux RSS-Twitter de Framasoft) et ensuite pour les
>> utilisateurs de Franamews payant leur offrir ça en + (mais pour plus
>> tard donc, une fois que Framanews sera lancé, qu'on aura testé l'appli,
>> toussa)
> Mouais, ça va être dur quand même d'offrir le service aux utilisateurs
> payants :
> * déjà il va se passer un certain temps avant d'être en mesure (compta,
> déclaration, toussa) de proposer de payer
> * il va falloir maintenir l'identification des gens qui payent sur ton
> service (donc faire un système de clé ou je ne sais quoi)
> * et s'il y a trop de gens qui payent ?
2/ Ah oui là c'est effectivement plus compliqué...
3/ On limite aux 25 premiers inscrits, ou on offre l'accès que pour les
dons récurrents (c'était juste une idée pour offrir le service sans
faire tomber
les serveurs :D). Si trop de personnes payent, on gagne trop d'argent
qu'on investit dans d'autres serveurs :P
>> Je comptais aussi envoyer un petit mail à Sebsauvage, ayant vu un de ces
>> liens sharlii précisé que ça semblait lui manquer, mais mon serveur ne
>> tiendra jamais si je lui envoie, je m'en doute (même pas 300Mo de RAM
>> dessus)
>> Une petite annonce linuxFr --> dis-le si tu veux ma mort :D
> Bah non : tu annonces juste que tu as codé ça, que c'est simple à
> installer et à coder, mais que pour pas écrouler ton serveur, tu peux
> juste pas fournir une adresse démo. Ou alors un serveur de démo avec la
> conf apache (ou nginx) qui bloque sur @framasoft et #framasoft.
Faire tourner Apache sur mon serveur sera déjà un bel exploit :D
>> liens sharlii précisé que ça semblait lui manquer, mais mon serveur ne
>> tiendra jamais si je lui envoie, je m'en doute (même pas 300Mo de RAM
>> dessus)
>> Une petite annonce linuxFr --> dis-le si tu veux ma mort :D
> Bah non : tu annonces juste que tu as codé ça, que c'est simple à
> installer et à coder, mais que pour pas écrouler ton serveur, tu peux
> juste pas fournir une adresse démo. Ou alors un serveur de démo avec la
> conf apache (ou nginx) qui bloque sur @framasoft et #framasoft.
Héhé, pourquoi bloquer sur framasoft, hum ? :-P
>
>>> Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
>>> avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
>>> exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
>> Ah je suis partant pour faire ça aussi :-) Certains sites proposent déjà
>> ce service, ça ne doit être trop horrible à coder (quoi, c'est horrible
>> de nettoyer le code à coups de regex ? :O)
> Moi j'utilise ça : http://code.fivefilters.org/full-text-rss Tu peux
> essayer d'y piocher des idées, on sait jamais.
>
Je vais commencer par "terminer" celui-ci, mais merci pour le lien, je
>>> Je me suis posé la question de l'installation d'un serveur de full text rss (truc qui donne un flux
>>> avec les articles complets à partir d'un flux avec juste un aperçu de l'article), mais c'est
>>> exactement le même problème. Un problème à la fois dirons-nous : framanews d'abord.
>> Ah je suis partant pour faire ça aussi :-) Certains sites proposent déjà
>> ce service, ça ne doit être trop horrible à coder (quoi, c'est horrible
>> de nettoyer le code à coups de regex ? :O)
> Moi j'utilise ça : http://code.fivefilters.org/full-text-rss Tu peux
> essayer d'y piocher des idées, on sait jamais.
>
regarderai quand je serai moins fatigué :)
Loïc Grobol
Jun 22, 2013, 5:17:12 AM6/22/13
to frama...@googlegroups.com
On Friday 2013-June-21 Gatien Bovyn wrote :
> En prévision du futur lancement (officiel) de Framanews, que pensez-vous
> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
> disponible ?
>
> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
> une petite bête en bêta ici : http://198.23.135.58:5000/
> Supporte la création de flux pour les utilisateurs
> En prévision du futur lancement (officiel) de Framanews, que pensez-vous
> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
> disponible ?
>
> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
> une petite bête en bêta ici : http://198.23.135.58:5000/
> Supporte la création de flux pour les utilisateurs
> <http://198.23.135.58:5000/user/framasoft.xml> et les hashtags
> <http://198.23.135.58:5000/htag/framasoft.xml>.
>
> <http://198.23.135.58:5000/htag/framasoft.xml>.
>
> C'est du full python, sans base de données, ça devrait tourner sur à peu
> près tous les serveurs de Frama :-)...
> Pour le code source, c'est par ici : Github
> <https://github.com/Astalaseven/twitter-rss>
> près tous les serveurs de Frama :-)...
> Pour le code source, c'est par ici : Github
>
>
> Asta
Je ne saisis pas bien pourquoi tu tiens à parser le html pour ça. Comme un
flux RSS n'est pas censé être actualisé toutes les minutes, la limite imposée
par l'API ne devrait pas poser de problèmes et ça devrait considérablement
alléger l'ensemble.
Mais c'est du très bon boulot que tu as fait là :)
LG
Gatien Bovyn
Jun 22, 2013, 5:20:24 AM6/22/13
to frama...@googlegroups.com
dont les fonctionnalités disparaissent, qui est limitée et qui nécessite
de s'authentifier :-)
D'autres systèmes basés sur l'API existent, notamment dans le lien que
Luc a envoyé : http://tt-rss.org/forum/viewtopic.php?t=2229
>
> Mais c'est du très bon boulot que tu as fait là :)
>
> LG
Merci :-)
> Mais c'est du très bon boulot que tu as fait là :)
>
> LG
Loïc Grobol
Jun 22, 2013, 5:48:04 AM6/22/13
to frama...@googlegroups.com
On Saturday 2013-June-22 Gatien Bovyn wrote :
> D'autres systèmes basés sur l'API existent, notamment dans le lien que
> Luc a envoyé : http://tt-rss.org/forum/viewtopic.php?t=2229
Il y a même un wrapper autour de l'API en python. Mais il ne gère que python 2
> D'autres systèmes basés sur l'API existent, notamment dans le lien que
> Luc a envoyé : http://tt-rss.org/forum/viewtopic.php?t=2229
et on dirait du Java, c'est immonde : https://github.com/bear/python-twitter/blob/master/twitter.py
LG
Christophe Masutti
Jun 22, 2013, 5:51:19 AM6/22/13
to frama...@googlegroups.com, Luc Didry
Le 21/06/2013 23:22, Luc Didry a �crit :
>> de cr�er un flux RSS pour le Twitter de Framasoft en plus du blog d�j�
>> disponible ?
>>
>> L'API de Twitter s'�tant vue priv�e de cette fonctionnalit�, j'ai pondu
>> une petite b�te en b�ta ici : http://198.23.135.58:5000/
>> Supporte la cr�ation de flux pour les utilisateurs
>> pr�s tous les serveurs de Frama :-)...
>
> Je serais assez pour mais il faudrait faire des tests de charge avant d'offrir �a au public (je me
> m�fie du public maintenant). J'ai test� avec un flux : �a prend 70 � 90% d'un thread (core i7, qui
> poutre, toussa) et avec 5 flux rafra�chis en m�me temps, �a prend la m�me chose, �a redescend, �a
> remonte, �a redescend, etc.
> C'est pas multithread�, donc au pire �a ne monopolise qu'un thread, mais les requ�tes risquent de
> s'accumuler et de prendre beaucoup de temps � �tre trait�.
> Je pense qu'un test avec 300 users/hashtag en simultan� pour commencer permettrait de voir si �a
> tient. Puis passer � 1000. Puis 3000. Je ne pense pas que ce soit un nombre d�connant.
> Je viens de tester avec siege http://www.joedog.org/siege-home/). 2 siege (un user twitter diff�rent
> pour chacun) avec 3 utilisateurs simul�s pour chacun (siege -c 3
> pense ;) (mais �vite de donner l'adresse de ton serveur hein ! C'est un jeu dangereux pour sa
>
> Je me suis pos� la question de l'installation d'un serveur de full text rss (truc qui donne un flux
> avec les articles complets � partir d'un flux avec juste un aper�u de l'article), mais c'est
> exactement le m�me probl�me. Un probl�me � la fois dirons-nous : framanews d'abord.
>
> Attends, je viens de relire ce que tu as propos� : en fait tu propose pas qu'on mette un serveur �
> disposition, mais juste le flux du twitter framasoft ? �a oui, �a le fait !
>
> Mes 2cts
Hello
Perso je trouve le concept super! J'arrive pas � acc�der � l'adresse,
mais j'ai saisi l'id�e.
Par exemple au CHU, le proxy m'emp�che d'acc�der � des flux twitter (par
exemple si dans une page il y a un encart avec des flux twitter, je ne
les vois pas, et bien entendu je n'acc�de pas du tout � Twitter). Par
contre je peux lire des flux rss.... :)
A++
C.
--
Christophe Masutti
==============
"La route est longue, mais la voie est libre�"
http://www.framasoft.org
Framasoft ne vit que par vos dons (d�ductibles des imp�ts). Merci
d'avance pour votre soutien
soutenir.framasoft.org
===================
- Twitter : twitter.com/framasoft
- Twitter :twitter.com/framatophe
===================
http://christophe.masutti.name
> On 21/06/2013 22:25, Gatien Bovyn wrote:
>> En pr�vision du futur lancement (officiel) de Framanews, que pensez-vous
>> de cr�er un flux RSS pour le Twitter de Framasoft en plus du blog d�j�
>> disponible ?
>>
>> L'API de Twitter s'�tant vue priv�e de cette fonctionnalit�, j'ai pondu
>> une petite b�te en b�ta ici : http://198.23.135.58:5000/
>> Supporte la cr�ation de flux pour les utilisateurs
>> <http://198.23.135.58:5000/user/framasoft.xml> et les hashtags
>> <http://198.23.135.58:5000/htag/framasoft.xml>.
>>
>> C'est du full python, sans base de donn�es, �a devrait tourner sur � peu
>> <http://198.23.135.58:5000/htag/framasoft.xml>.
>>
>> pr�s tous les serveurs de Frama :-)...
>> Pour le code source, c'est par ici : Github
>> <https://github.com/Astalaseven/twitter-rss>
>>
>>
>> Asta
>>
> C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir car je suivais 2/3 personnes
> via l'API 1 et comme elle a disparu et ses flux rss�
>> <https://github.com/Astalaseven/twitter-rss>
>>
>>
>> Asta
>>
> C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir car je suivais 2/3 personnes
>
> Je serais assez pour mais il faudrait faire des tests de charge avant d'offrir �a au public (je me
> m�fie du public maintenant). J'ai test� avec un flux : �a prend 70 � 90% d'un thread (core i7, qui
> poutre, toussa) et avec 5 flux rafra�chis en m�me temps, �a prend la m�me chose, �a redescend, �a
> remonte, �a redescend, etc.
> C'est pas multithread�, donc au pire �a ne monopolise qu'un thread, mais les requ�tes risquent de
> s'accumuler et de prendre beaucoup de temps � �tre trait�.
> Je pense qu'un test avec 300 users/hashtag en simultan� pour commencer permettrait de voir si �a
> tient. Puis passer � 1000. Puis 3000. Je ne pense pas que ce soit un nombre d�connant.
> Je viens de tester avec siege http://www.joedog.org/siege-home/). 2 siege (un user twitter diff�rent
> pour chacun) avec 3 utilisateurs simul�s pour chacun (siege -c 3
> http://0.0.0.0:5000/user/framaka.xml). Le serveur laisse tomber les connexions en timeout en moins
> d'une minute :(
>
> Bon, comme j'ai l'air un peu pessimiste, on va changer la note : c'est super bien fait ! Simple
> d'installation, simple d'utilisation, tout ce qu'on peut en attendre. Je ne peux que te conseiller
> d'aller en parler l� : http://tt-rss.org/forum/viewtopic.php?t=2229, tu y seras bien accueilli je
> d'une minute :(
>
> Bon, comme j'ai l'air un peu pessimiste, on va changer la note : c'est super bien fait ! Simple
> d'installation, simple d'utilisation, tout ce qu'on peut en attendre. Je ne peux que te conseiller
> pense ;) (mais �vite de donner l'adresse de ton serveur hein ! C'est un jeu dangereux pour sa
> charge). Pis une petite annonce LinuxFr serait pas mal non plus tiens.
> C'est typiquement le type de logiciel qu'on fait tourner pour soi, mais surtout pas pour beaucoup de
> monde (en l'�tat actuel, s'entend).
> C'est typiquement le type de logiciel qu'on fait tourner pour soi, mais surtout pas pour beaucoup de
>
> Je me suis pos� la question de l'installation d'un serveur de full text rss (truc qui donne un flux
> avec les articles complets � partir d'un flux avec juste un aper�u de l'article), mais c'est
> exactement le m�me probl�me. Un probl�me � la fois dirons-nous : framanews d'abord.
>
> Attends, je viens de relire ce que tu as propos� : en fait tu propose pas qu'on mette un serveur �
> disposition, mais juste le flux du twitter framasoft ? �a oui, �a le fait !
>
> Mes 2cts
Hello
Perso je trouve le concept super! J'arrive pas � acc�der � l'adresse,
mais j'ai saisi l'id�e.
Par exemple au CHU, le proxy m'emp�che d'acc�der � des flux twitter (par
exemple si dans une page il y a un encart avec des flux twitter, je ne
les vois pas, et bien entendu je n'acc�de pas du tout � Twitter). Par
contre je peux lire des flux rss.... :)
A++
C.
--
Christophe Masutti
==============
"La route est longue, mais la voie est libre�"
http://www.framasoft.org
Framasoft ne vit que par vos dons (d�ductibles des imp�ts). Merci
d'avance pour votre soutien
soutenir.framasoft.org
===================
- Twitter : twitter.com/framasoft
- Twitter :twitter.com/framatophe
===================
http://christophe.masutti.name
Gatien Bovyn
Jun 22, 2013, 5:02:28 PM6/22/13
to frama...@googlegroups.com
Nouvelle version, ajout du support des pic.twitter.com :
http://198.23.135.58:5000/user/framasoft.xml (scroller tout en bas, vous
pourrez pas rater les zoulis yeux)
Ah oui, si vous voulez éviter des prises de tête, des commits compulsifs
inefficaces, désactivez Ghostery/Disconnect.me quand vous faites du
développement web... /me a des envies de meurtres...
Chromium rend très mal les flux RSS (il le rend pas, il envoie du bête
xml), mais comme j'ai testé un autre flux rss et que c'est pareil, c'est
que le bug vient de Chromium :-P
On 22/06/13 11:51, Christophe Masutti wrote:
>>> pensez-vous
>>> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
>>> disponible ?
>>>
>>> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
>>> une petite bête en bêta ici : http://198.23.135.58:5000/
>>> Supporte la création de flux pour les utilisateurs
>> nombre déconnant.
>> pour chacun) avec 3 utilisateurs simulés pour chacun (siege -c 3
>>
>> Je me suis posé la question de l'installation d'un serveur de full
>> framanews d'abord.
>>
>> Attends, je viens de relire ce que tu as proposé : en fait tu propose
>> pas qu'on mette un serveur à
>> disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le
> mais j'ai saisi l'idée.
> Par exemple au CHU, le proxy m'empêche d'accéder à des flux twitter
http://198.23.135.58:5000/user/framasoft.xml (scroller tout en bas, vous
pourrez pas rater les zoulis yeux)
Ah oui, si vous voulez éviter des prises de tête, des commits compulsifs
inefficaces, désactivez Ghostery/Disconnect.me quand vous faites du
développement web... /me a des envies de meurtres...
Chromium rend très mal les flux RSS (il le rend pas, il envoie du bête
xml), mais comme j'ai testé un autre flux rss et que c'est pareil, c'est
que le bug vient de Chromium :-P
On 22/06/13 11:51, Christophe Masutti wrote:
> Le 21/06/2013 23:22, Luc Didry a écrit :
>> On 21/06/2013 22:25, Gatien Bovyn wrote:
>>> En prévision du futur lancement (officiel) de Framanews, que
>> On 21/06/2013 22:25, Gatien Bovyn wrote:
>>> pensez-vous
>>> de créer un flux RSS pour le Twitter de Framasoft en plus du blog déjà
>>> disponible ?
>>>
>>> L'API de Twitter s'étant vue privée de cette fonctionnalité, j'ai pondu
>>> une petite bête en bêta ici : http://198.23.135.58:5000/
>>> Supporte la création de flux pour les utilisateurs
>>> <http://198.23.135.58:5000/user/framasoft.xml> et les hashtags
>>> <http://198.23.135.58:5000/htag/framasoft.xml>.
>>>
>>> <http://198.23.135.58:5000/htag/framasoft.xml>.
>>>
>>> C'est du full python, sans base de données, ça devrait tourner sur à
>>> peu
>>> près tous les serveurs de Frama :-)...
>>> peu
>>> Pour le code source, c'est par ici : Github
>>> <https://github.com/Astalaseven/twitter-rss>
>>>
>>>
>>> Asta
>>>
>> C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir
>> car je suivais 2/3 personnes
>> via l'API 1 et comme elle a disparu et ses flux rss…
>>> <https://github.com/Astalaseven/twitter-rss>
>>>
>>>
>>> Asta
>>>
>> C'est vraiment sympa ! Et typiquement, c'est le truc qui fait plaisir
>> car je suivais 2/3 personnes
>>
>> Je serais assez pour mais il faudrait faire des tests de charge avant
>> Je serais assez pour mais il faudrait faire des tests de charge avant
>> d'offrir ça au public (je me
>> méfie du public maintenant). J'ai testé avec un flux : ça prend 70 à
>> méfie du public maintenant). J'ai testé avec un flux : ça prend 70 à
>> 90% d'un thread (core i7, qui
>> poutre, toussa) et avec 5 flux rafraîchis en même temps, ça prend la
>> même chose, ça redescend, ça
>> remonte, ça redescend, etc.
>> C'est pas multithreadé, donc au pire ça ne monopolise qu'un thread,
>> mais les requêtes risquent de
>> s'accumuler et de prendre beaucoup de temps à être traité.
>> Je pense qu'un test avec 300 users/hashtag en simultané pour
>> commencer permettrait de voir si ça
>> tient. Puis passer à 1000. Puis 3000. Je ne pense pas que ce soit un
>> même chose, ça redescend, ça
>> remonte, ça redescend, etc.
>> C'est pas multithreadé, donc au pire ça ne monopolise qu'un thread,
>> mais les requêtes risquent de
>> s'accumuler et de prendre beaucoup de temps à être traité.
>> Je pense qu'un test avec 300 users/hashtag en simultané pour
>> commencer permettrait de voir si ça
>> nombre déconnant.
>> Je viens de tester avec siege http://www.joedog.org/siege-home/). 2
>> siege (un user twitter différent
>> pour chacun) avec 3 utilisateurs simulés pour chacun (siege -c 3
>> http://0.0.0.0:5000/user/framaka.xml). Le serveur laisse tomber les
>> connexions en timeout en moins
>> d'une minute :(
>>
>> Bon, comme j'ai l'air un peu pessimiste, on va changer la note :
>> c'est super bien fait ! Simple
>> d'installation, simple d'utilisation, tout ce qu'on peut en attendre.
>> Je ne peux que te conseiller
>> d'aller en parler là : http://tt-rss.org/forum/viewtopic.php?t=2229,
>> connexions en timeout en moins
>> d'une minute :(
>>
>> Bon, comme j'ai l'air un peu pessimiste, on va changer la note :
>> c'est super bien fait ! Simple
>> d'installation, simple d'utilisation, tout ce qu'on peut en attendre.
>> Je ne peux que te conseiller
>> tu y seras bien accueilli je
>> pense ;) (mais évite de donner l'adresse de ton serveur hein ! C'est
>> un jeu dangereux pour sa
>> charge). Pis une petite annonce LinuxFr serait pas mal non plus tiens.
>> C'est typiquement le type de logiciel qu'on fait tourner pour soi,
>> mais surtout pas pour beaucoup de
>> monde (en l'état actuel, s'entend).
>> charge). Pis une petite annonce LinuxFr serait pas mal non plus tiens.
>> C'est typiquement le type de logiciel qu'on fait tourner pour soi,
>> mais surtout pas pour beaucoup de
>>
>> Je me suis posé la question de l'installation d'un serveur de full
>> text rss (truc qui donne un flux
>> avec les articles complets à partir d'un flux avec juste un aperçu de
>> l'article), mais c'est
>> exactement le même problème. Un problème à la fois dirons-nous :
>> framanews d'abord.
>>
>> Attends, je viens de relire ce que tu as proposé : en fait tu propose
>> pas qu'on mette un serveur à
>> disposition, mais juste le flux du twitter framasoft ? Ça oui, ça le
>> fait !
>>
>> Mes 2cts
> Hello
>
> Perso je trouve le concept super! J'arrive pas à accéder à l'adresse,
>>
>> Mes 2cts
> Hello
>
> mais j'ai saisi l'idée.
> Par exemple au CHU, le proxy m'empêche d'accéder à des flux twitter
> (par exemple si dans une page il y a un encart avec des flux twitter,
> je ne les vois pas, et bien entendu je n'accède pas du tout à
Reply all
Reply to author
Forward
0 new messages