Our data is released under various Creative Commons licenses.더 많은 정보
해당 콘텐츠를 좋아한다면 기부도 고려 부탁해요.
담벼락 (7,487 스레드)
Tartar
1 일 전
Feniks
1 일 전
TATAR1
1 일 전
AlanF_US
1 일 전
jan_OkulaJu
4 일 전
DostKaplan
5 일 전
AlanF_US
5 일 전
AlanF_US
5 일 전
Synonyms
5 일 전
DostKaplan
5 일 전
Бүгенге көндә татар телендә Ясалма Фәһемне (ЯФ / AI) өйрәтү һәм аның белән эшләү өчен зур лингвистик мәгълүматлар базасы (корпуслар), махсус тел модельләре (LLM) һәм автоматик транслитерация кораллары формалашкан. Татар ЯФ дөньясы күбесенчә кирилл имласына нигезләнә, әмма латин графикасын (Zamanälif) да үз эченә алган махсус проектлар һәм конвертерлар бар. [1] (https://www.semanticscholar.org...651468a9c70025), [2] (https://github.com/neurotatarlar/awesome-tatar), [3] (https://huggingface.co/datasets...tar-web-corpus), [4] (https://www.corpus.tatar/en), [5] (https://arxiv.org/html/2602.19174v5), [6] (https://type.today/en/journal/tatar)
Төп мәгълүматлар базалары һәм ЯФ инструментлары түбәндәге төркемнәргә бүленә:
1. Текст базалары (Корпуслар) һәм Датасетлар
Тел модельләрен өйрәтү өчен төп нигез булып зур текст массалары тора:
• Tatar Web Corpus (TatarNLPWorld): Бүген ЯФ өчен иң зур ачык датасетларның берсе. Бу базада массакүләм мәгълүмат чаралары, китаплар, Википедия һәм социаль челтәрләрдән җыелган 1 миллионнан артык документ бар. [1] (https://huggingface.co/datasets...tar-web-corpus)
• Татар теленның язма корпусы (corpus.tatar): 500 миллионнан артык сүз алланышын (>620 млн токен) берләштергән гаять зур база. Нигездә кириллицада, әмма ЯФ өчен тел кагыйдәләрен өйрәтүдә бәяләп бетергесез чыганак. [1] (https://www.corpus.tatar/en)
• «Туган тел» милли корпусы (tugantel.tatar): Татарстан Фәннәр академиясенең Гамәли семиотика институты тарафыннан эшләнгән, тирән морфологик билгеләмәләргә ия тел базасы. [1] (https://tugantel.tatar/?lang=en), [2] (https://ipsan.tatarstan.ru/eng/...-tugan-tel.htm)
• Латин графикасы өчен датасетлар: ЯФ берләшмәләре тарафыннан җыелган ачык чыганаклар (мәсәлән, CulturaX яки татар Википедиясенең латин өлеше) модельләрне ике график системада да эшләргә өйрәтә. [1] (https://github.com/neurotatarlar/awesome-tatar), [2] (https://type.today/en/journal/tatar)
2. Татар Тел Модельләре (LLM)
Ачык ЯФ платформаларында (Hugging Face) татарча текстны аңлаучы һәм генерацияләүче махсус модельләр барлыкка килде: [1] (https://github.com/neurotatarlar/awesome-tatar)
• TATlit: Татар теле өчен махсус өйрәтелгән модель (якынча 478 миллион параметрлы).
• tweety-tatar-base: Көчле өметләр уятучы, Mistral-7B архитектурасына нигезләнгән модель.
• mGPT-1.3B-tatar: Төрле телләрне, шул ук вакытта татарчаны да яхшы аңлаучы зур тел моделе.
• Глобаль модельләр: ChatGPT (OpenAI), Claude, һәм Google Gemini бүгенге көндә татар телендә (кириллда да, латинда да) иркен аралаша һәм бер графиктан икенчесенә югары дәрәҗәдә тәрҗемә итә ала. [1] (https://tatar-inform.tatar/news...urynda-5896026), [2] (https://github.com/neurotatarlar/awesome-tatar), [3] (https://vatantat.tatmedia.ru/ne...-satmyn-104742), [4] (https://translate.google.com/?hl=ru&sl=en&tl=ru&q=)
3. Кирилл-Латин конвертерлары һәм Транслитерация ЯФ-кораллары
Кирилл һәм латин базаларын берләштерү өчен махсус программа кораллары кулланыла:
• TurkicNLP: Төрки телләр, шул исәптән татар теле өчен эшләнгән заманча Python китапханәсе. Ул ЯФ ярдәмендә текстның контекстын анализлап, кириллдан латинга (һәм киресенчә) ике яклы автоматик транслитерация ясый ала. [1] (https://arxiv.org/html/2602.19174v5)
• Казан галимнәренең алгоритмик модельләре: Татар сүзләренең этимологиясе һәм фонетикасына нигезләнеп эшләнгән, алынма сүзләрне транслитерация кагыйдәләре белән күчерүче махсус ЯФ-конвертерлар эшләп килә. [1] (https://www.researchgate.net/pu...Tatar_language), [2] (https://www.semanticscholar.org...651468a9c70025)
• Lisan.Tatar: Соңгы елларның зур казанышы — гарәп имлясындагы (иске татар теле) текстларны хәзерге татар әдәби теленә (кирилл/латин) күчерүче ясалма фәһем хезмәте. [1] (https://www.azatliq.org/a/33578760.html)
4. Сөйләм базалары (Аудио һәм Язу)
• TatSC (Tatar Speech Corpus) һәм ТатарTTS: Татарстан Фәннәр академиясе Гамәли семиотика институты һәм ISSAI тарафыннан эшләнгән ачык аудиобаза. Ул сөйләмне тану (STT) һәм текстны тавышка әйләндерү (TTS) базаларын үз эченә ала. [1] (https://research.nu.edu.kz/ru/p...e-tatar-speech), [2] (https://github.com/IS2AI/TatarTTS), [3] (https://github.com/neurotatarlar/awesome-tatar), [4] (https://arxiv.org/html/2602.19174v5)
Йомгак: Бүген татар ЯФ-ның төп базасы neurotatarlar/awesome-tatar ачык проектында тупланган. Монда теләсә кайсы программист яки тикшеренүче татарча кирилл-латин модельләрен өйрәтү өчен барлык әзер ресурсларны таба ала. [1] (https://github.com/neurotatarlar/awesome-tatar)
Are wall messages hidden if it contains a link to external images? How else do we show screenshots to report a bug?
No, wall messages that contain links to external images that are relevant to Tatoeba (for instance, screenshots related to our interface) are not hidden.
이 메세지의 내용은 우리의 규칙에 어긋나 있기 때문에 숨김처리가 되었어요. 내용은 그 메세지를 쓴 사람과 관리자만 볼 수 있어요.
이 메세지의 내용은 우리의 규칙에 어긋나 있기 때문에 숨김처리가 되었어요. 내용은 그 메세지를 쓴 사람과 관리자만 볼 수 있어요.
Hi everyone! I'd like to share a small project that uses Tatoeba.
Synopedia (https://www.synopedia.com) is a free thesaurus that groups synonyms by meaning, with antonyms and short definitions, in English, French, Spanish, Italian, German and Catalan. On the English word pages, the example sentences come from Tatoeba (CC BY 2.0 FR), credited on every page and on the sources page: https://www.synopedia.com/sources
Example: https://www.synopedia.com/synonym/bright
Thank you to all the contributors, the sentences really help show how a word is used in context. If a wiki editor thinks it fits, I'd be happy to see it added to the "Projects using Tatoeba" page (I couldn't get a wiki account). Feedback welcome too!
I added it to the wiki page. Glad to see Tatoeba credited correctly on the site.
I see that you have trend lines in the style of Google Ngram Viewer that show the rise or fall in usage of the various synonyms over time. However, it's not possible to compare the frequency across the synonyms as it would be on a Google Ngram Viewer page that showed them all together. The ability to go directly to Google Ngram Viewer (if that's allowed by its license) would also be useful because it would let the user see many more examples of the words in context.
Thank you both for taking the time to look at the site, and thanks AlanF_US for adding it to the wiki page! One small detail, it’s the example sentences that come from Tatoeba, not the definitions.
These are great suggestions. Comparing synonyms on a single chart would make a lot more sense than one small curve per word, and a direct link to Google Ngram Viewer is an easy win for anyone who wants more context. And you’re right about the language names: on the English pages they should read “French”, “Spanish” and so on, not “Français” or “Español”. I’m adding all three to my list.
Thanks again, this kind of feedback really helps!
> One small detail, it’s the example sentences that come from Tatoeba, not the definitions.
Got it. I fixed that on the wiki page.
Concerning the "In Other Languages" section, wouldn't it make more sense to use language-specific exonyms and not endonyms?
Minemçä, saytta inde cömlälärne tatar telenä kirill häm latin grafikasında avtomat räweştä tärcemä itü öçen quldan kertelgän küp cömlälär bar. Bu citärlek. Monnan tış, yullar, ısullar, kodlar häm başqa mäğlümat birelä.
Минемчә, сайтта инде җөмләләрне татар теленә кирилл һәм латин графикасында автомат рәвештә тәрҗемә итү өчен кулдан кертелгән күп җөмләләр бар. Бу җитәрлек. Моннан тыш, юллар, ысуллар, кодлар һәм башка мәгълүмат бирелә.
In my opinion, in order to automate the translation of sentences into Tatar in two versions - Cyrillic and Latin, there are already many sentences entered manually on the site. That's quite enough. In addition, paths, methods, codes, and more are indicated.
💯
According to gillux, none of that is the bottleneck. The problem is the lack of resources to get the work done. He writes:
Every now and then Tatoeba receives some contributions from new people
and I tried my best to accompany them and review their code, but
eventually nobody [stuck] around and here we are. The way open-source
projects usually work is that if there is enough demand for a particular
feature, or if some talented individual gets annoyed enough by the
current state of the project, somebody will generously step in and do
the work, and that’s how new people join the team. It happened in the
past and it could happen again.
My query: https://tatoeba.org/en/sentence...ee+with&to=tur
On iPhone 13, Chrome browser.
The query itself doesn't seem to matter. When I vigorously scroll up and down, sideways, fast, I would get an error page. I've noticed this happening for some time now.
Screenshot: https://ibb.co/m5Rx62yK
I linked two sentences incorrectly (#4694466 and #65981) because I was going too fast and misread a word ("pini" as "pali"). I'll be more careful in the future but for now can someone with permissions unlink the two? Thanks :-)
Done. Please check it was the correct sentence.
Hello, Tatoeba team. A few months ago, I shared sentences in Tawallammat Tamajaq with you—translated into English and Arabic—across two files. Could you please let me know why those sentences haven't been added yet?
Because the amount of work required to do that is huge, and there are plenty of other things to do already, and Tatoeba has very, very few resources. I understand that you would like the sentence pairs to be added, but at the moment the most useful thing you can do is to be patient, or to get involved and do the work yourself, or to pay somebody to do the work, or to donate money to Tatoeba.
Could someone unblock the sentences with the tag "unblock"?
Sentences are blocked for a variety of reasons, among them:
(1) they violate a copyright
(2) their content violates community guidelines
(3) they are posted by someone who has written a large number of sentences that belong to categories 1 or 2 and that therefore we can't trust
(4) they are translation of sentences in the other three categories
These characteristics don't change simply with the passage of time.
As I've said before, I really hope we're not so short of ideas for sentences that we need to turn to such problematic sources.
I added some tags "unblock" to some blocked sentences.
They're simply sentences and are O.K.
(I suppose–I'm not sure–the sentences tegged by other ones are also O.K.)
For the same reason that you're not sure whether sentences tagged by other people are acceptable, we can't be sure whether the sentences you tagged are acceptable, and it's not feasible for us to look into this further.