I've temporaly removed "Auto dectection" as anyway it's not working right now, in the mean time I've started thinking about coding my own one, as it seems there's no good open source out of there to do this. Basically I think to use the current tatoeba database to create some kind of 3-gram stats table by languages, and after do a magic algorithm that will calculate a score when you submit a sentence, and will choose the language with the highest score.

(for reuse purpose it will be something independant from tatoeba, I mean it will be a standalone service, though here in tatoeba we will still use it transparently)

So I will maybe also take the advantage of coding this to , if i've time / if really needed, to permit users who want to enter the language they contribute him, in order for the system to not wrongly detect a sentence has spanish for soemone who contribute only in French , Shanghainese and Chinese.

actually I've done a quick debug and discovered that this page was doing actually a heavy request on the database, and with the current load on the website, timeouted before being accomplished (and in the meantime increased even more the already high load).

So waiting me to put a cache on this page, I will desactivate this one.

Ok I've put a correction, actually as I've said with Sacredceltic, the problem is that the language detection rely on a API provided by Google, as actually very few tools permit to do this.

And seems today Google has removed this functionnaly, or at least limited the access. So for the moment autodetect will set the sentence as unknown, waiting to find something to replace google API.

but the problem is solved now,no?

oui, mettre la langue en inconnu, et de mon coté faire que cela inscrit dans les logs que le service google est tombé.

et c'est quand je reviens que le problème disparaît .... car bon ça aurait été trop simple si j'avais eu le temps de voir la cause exacte, histoire de proposer un correctif pérenne...

ça me rappelle quand je donne cours, les problèmes des élèves disparaissent comme par magie quand je m'approche de leur ordinateur, quand bien même ils avaient réellement un problème.
C'est un peu le don de thaumaturgie à la sauce Tatoeba.

en fait pour le coup, ce ne serai du coup pas si bizarre, pour la détection automatique de langue, il n'y avait pas (encore maintenant?) d'outil efficace libre pour faire cela sur autant de langue et de tres court echantillons, du coup cela passe par une API de google. Donc du coup si l'url à changer où s'ils ont arrêté le service, ceci expliquerait cela.

Je regarde cela.

Same problem for me

BUT , when I choose directly the language , not autodetect, I can add,

can others confirm this ?

yep sorry for this, the problem have happened at the beginning of my working day so I see the messages only know. And Murphy law oblige, it's during my busiest days that all these problems happen ...

I'm starting to investigate this

should be fixed by now.

[fra] Ce qui est intéressant c'est de voir c'est que ce sont les langues les plus communes de tatoeba qui sont en proportion le moins traduit, sûrement que lorsqu'une personne contribue dans une langue "rare", elle le fait souvent soit en traduisant seulement, soit en ajoutant puis en traduisant peu de temps après.
Alors que les contributeurs dans les langues assez bien représentées sur Tatoeba prennent plus de liberté, ayant surement à l'esprit "De toute manières quelqu'un finira par me traduire"

Bon ça enfonce un peu des portes ouvertes mon analyse...

I willl have time to restore them around friday, not before, but at the end it will be done

No that was not normal, as any crash anyway. It happends because of the conjonction of boracasli stuff and (and actually mainly this), the fact that google suddenly decided to crawl our website with a 5 request by second rate, so Tatoeba simply said "no I can't, or you should give me a raise" and goes on strike.

but don't worry we get backup of the data so at the end everything will get back to normal.

Yep I don't think this account is a fake one from bora, my bora-fake-account-detector-3000-next-gen-deluxe-edition(tm) has recognized no "bora"-like pattern in his behaviour.

This user seems to leave and answer to comment, so may be drop him so comment on the languages in which he has added sentences that he hasn't added in his profile.

Don't worry for this :) Actually I've started working on this issue this weekend, but the internet connection there make the task much much slower. But in the end it will get fix, data are backup often enough.

On the way to fix everything...

Pour la premiere fois c'etait du au petit crash qy'il y a eu il y a 3/4 jours , du coup la table de stats etait plus synchronisé, et la c'est redescendu car j'ai enfin trouvé le temps de faire un script pour supprimer de façon propre et rapide les 238 comptes de bora et les phrases associés.

what a coincidence, just before I planned to go to sleep ....

oui, quelque jours a relacher mon attention, et paf, j'ai blacklisté sa nouvelle adresse IP, on devrait être tranquille quelque jours. Va falloir que je me fasse un petit script pour supprimer de manière propre toutes traces d'un utilisateur, comme s'il n'avait jamais existé. Histoire de supprimer plus rapidement les avatars de l'ami bora et leurs contributions délétères

... as for example I've recorded some of Sacredceltic's sentences