menu
Tatoeba
language
註冊 登入
language 中文 (台灣)
menu
Tatoeba

chevron_right 註冊

chevron_right 登入

瀏覽

chevron_right 顯示隨機例句

chevron_right 按語言瀏覽

chevron_right 按列表瀏覽

chevron_right 按標籤瀏覽

chevron_right 瀏覽錄音

社群

chevron_right 留言板

chevron_right 全體成員名單

chevron_right 成員語言

chevron_right 母語人士

search
clear
swap_horiz
search

功能表

返回留言板

Selena777 Selena777 2022年12月11日 2022年12月11日 下午7:09:57 [UTC] flag 檢舉 link 永久連結

Hello, how can I download sentences belonging to a particular user? There is "detailed sentences" option which let indicate user's name but doesn't let to choose it before downloading. Can I change it?

{{vm.hiddenReplies[39258] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
lbdx lbdx 2022年12月11日 2022年12月11日 下午8:35:03 [UTC] flag 檢舉 link 永久連結

I don't think that's possible before downloading. Maybe the best thing to do is to download the sentences_detailed file of the desired language and then filter the user's sentences with a spreadsheet.

{{vm.hiddenReplies[39260] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Selena777 Selena777 2022年12月12日 2022年12月12日 下午4:27:22 [UTC] flag 檢舉 link 永久連結

Accepting this approach, I must download more than one million English sentences, when I really need about 30,000 right now. I guess the file would be too big to process it.

Plain scrapping from Tatoeba.org using Beautiful Soup looks better than that, but maybe it's possible to scrap the data from its source database without html tags?

{{vm.hiddenReplies[39262] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
lbdx lbdx 2022年12月12日 2022年12月12日 下午4:45:51 [UTC] flag 檢舉 link 永久連結

> maybe it's possible to scrap the data from its source database without html tags?

if you have coding skills, maybe you can use the API (in beta).

https://en.wiki.tatoeba.org/articles/show/api#

{{vm.hiddenReplies[39263] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Selena777 Selena777 2022年12月12日 2022年12月12日 下午6:13:54 [UTC] flag 檢舉 link 永久連結

That's exactly what I need, thanks a lot!

Selena777 Selena777 2022年12月19日 2022年12月19日 下午7:22:08 [UTC] flag 檢舉 link 永久連結

How can I get more than 1000 sentences unlike using the Tatoeba search? Is there any variable for that in the API? I tried "count=all" or "count=5000", but it didn't help.

Thanuir Thanuir 2022年12月12日 2022年12月12日 下午6:00:43 [UTC] flag 檢舉 link 永久連結

FI
Jos tiedoston lataaminen ei ole ongelma itsessään, niin senhän voisi ladata ja sitten muokata tekstitiedostona. Poistaa vaan suurimman osan datasta, niin että jäljelle jää vain haluttu määrä lauseita.

EN
If downloading the file is not an issue as such, you could do that and edit the file (as a text file) to remove most of the data, leaving behind only a usable amount.

hecko hecko 2022年12月12日 2022年12月12日 下午6:01:02 [UTC] flag 檢舉 link 永久連結

you'd be surprised, it's only 27mb compressed and 156mb uncompressed
using the fantastic `tatoebatools` python library (made by lbdx, funnily enough) i was able to filter for my own sentences in 5 seconds
granted, your computer might be weaker than my 4-year-old core i5 laptop, but it should still take less time than figuring out the api *or* beautifulsoup, let alone running them

{{vm.hiddenReplies[39265] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Selena777 Selena777 2022年12月12日 2022年12月12日 下午6:21:20 [UTC] flag 檢舉 link 永久連結

Where can I learn more about the 'tatoebatools' library? (I can assume it permits you having and processing all the Tatoeba database on your own computer, right?)

{{vm.hiddenReplies[39268] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
hecko hecko 2022年12月12日 2022年12月12日 下午6:51:29 [UTC] flag 檢舉 link 永久連結

there's some documentation on the pypi page https://pypi.org/project/tatoebatools/
and yeah that's what it is, it handles all the downloading and csv quirks for you

Selena777 Selena777 2022年12月19日 2022年12月19日 下午7:25:05 [UTC] flag 檢舉 link 永久連結

Thanks! Btw, do I need to download the database just once or every time using the library? Unfortunately, I didn't have enough of patience to wait for downloading the database but if it's just one time I can wait.

{{vm.hiddenReplies[39301] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
hecko hecko 2022年12月19日 2022年12月19日 下午7:28:19 [UTC] flag 檢舉 link 永久連結

it saves it after downloading but it does redownload it if there's an update
updates are released every saturday at 6:30am utc

{{vm.hiddenReplies[39302] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Selena777 Selena777 2022年12月19日 2022年12月19日 下午7:49:50 [UTC] flag 檢舉 link 永久連結

Thanks for the answer, I'll try it, too.

{{vm.hiddenReplies[39303] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
CK CK 2022年12月20日,於 2022年12月20日 編輯 2022年12月20日 上午8:38:55 [UTC],於 2022年12月20日 上午8:49:34 [UTC] 編輯 flag 檢舉 link 永久連結

🍎 Here are files with only 4 fields, omitting the dates.

sentence_ID + tab + language_code + tab + text + tab + sentence_owner


🥝 All the exported sentences
http://study.aitech.ac.jp/4flds...2022-12-17.zip
228 MB

🥝 Just the English sentences
http://study.aitech.ac.jp/4flds...2022-12-17.zip
27 MB

🥝 Just the 891,125 sentences on List 907
http://study.aitech.ac.jp/4flds...2022-12-17.zip
12 MB


Perhaps one of these will help you.

{{vm.hiddenReplies[39304] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Selena777 Selena777 2022年12月22日 2022年12月22日 下午7:25:20 [UTC] flag 檢舉 link 永久連結

Thanks a lot!
Where can I get updates with new sentences?

{{vm.hiddenReplies[39311] ? 'expand_more' : 'expand_less'}} 隱藏回覆 顯示回覆
Cangarejo Cangarejo 2022年12月22日 2022年12月22日 下午7:50:03 [UTC] flag 檢舉 link 永久連結

At the bottom of every page on Tatoeba there’s a link to the Downloads page, which is updated weekly.

https://tatoeba.org/downloads

CK CK 2022年12月23日,於 2022年12月23日 編輯 2022年12月23日 上午1:37:59 [UTC],於 2022年12月23日 上午1:42:44 [UTC] 編輯 flag 檢舉 link 永久連結

If it is the English sentences on List 907 that you are interested in, you can download them at any time from this URL.

https://tatoeba.org/en/sentence...s/download/907

You will also have the option to include any linked Russian sentence.

Note that this export doesn't include the names of the sentence owners, though.