Создать ответ 
大БКРС 46+ 简体/繁體 в трёх частях
Автор Сообщение
Sapomaro Не на форуме


Сообщений: 201
Польза: 2862.6

Сообщение: #1
大БКРС 46+ 简体/繁體 в трёх частях
По сравнению с прошлой версией мусорных заголовков стало меньше.
Упрощённые и традиционные единичные иероглифы теперь имеют одну карточку.

Всего:
2 910 883 заголовков
1 516 148 карточек
2 831 заголовков и карточек удалено (они повторяли другие)

dde (при компиляции одним файлом) писал(а):{{Ошибок: 0. Предупреждений: 0.}}
{{Количество заголовков: 2910883. Количество карточек: 1516148.}}

Исходники (*.dsl): http://dump.ru/file/5374494
Один файл под Лингво х3 (*.lsd): http://dump.ru/file/5374498
Пароль как обычно.

Я пришёл к выводу, что добавление полных иероглифов на лету в онлайне будет сильно нагружать сервер, т. к. нужно постоянно будет подгружать базу данных в 1,5 метра (её можно сократить, но над этим придётся сильно чесать репу), а также перепроверять всю базу данных словаря на наличие повторяющихся заголовков.
09-07-2011 01:04
Цитировать это сообщение
sergdrum Не на форуме


Сообщений: 164
Польза: 694.5

Сообщение: #2
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Отлично, спасибо!
09-07-2011 01:44
Цитировать это сообщение
бкрс На форуме


Сообщений: 2 158
Польза: 4717.3

Сообщение: #3
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Ссылки потом на страницу закачки перемещу.

Что за дублирование 4 749 заголовков? Дайте хоть один дубликат.
Уникальных слов должно быть порядка 1 519 000, как на главной показано. Как раз в сумме с этими получается.


Цитата:что добавление полных иероглифов на лету в онлайне будет сильно нагружать сервер
Проблема не в технологии, проблема в том что вы не знаете что нужно тому кто ищет. Некоторым, действительно, нужны традиционные. А некоторые будут рады упрощенным, даже если вбили традиционные. Всем не угодишь.
09-07-2011 01:49
Цитировать это сообщение
Sapomaro Не на форуме


Сообщений: 201
Польза: 2862.6

Сообщение: #4
RE: 大БКРС 46+ 简体/繁體 в трёх частях
(09-07-2011 01:49)бкрс писал(а):  Что за дублирование 4 749 заголовков? Дайте хоть один дубликат.
Уникальных слов должно быть порядка 1 519 000, как на главной показано. Как раз в сумме с этими получается.

Это практически все единичные традиционные иероглифы (с английским переводом) и слова с такими иероглифами, которые были в словаре (в онлайн версии к ним доступа нет): 體, 氣, 上昇, 一夥儿 и т. д. Не думаю, что под нож попало много ценного.

Хотя есть кое-что, ща сяду делать исправление.
09-07-2011 02:21
Цитировать это сообщение
бкрс На форуме


Сообщений: 2 158
Польза: 4717.3

Сообщение: #5
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Ясно, это с конвертированием связано. Если не единичные иероглифы, то надо удалять из словаря (если есть упрощенные).
09-07-2011 03:06
Цитировать это сообщение
Sapomaro Не на форуме


Сообщений: 201
Польза: 2862.6

Сообщение: #6
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Шапка со ссылками обновилась.

Около 2000 слов удалось реабилитировать (они были в БКРС на полных вариантах и не имели упрощённого аналога). Остальные удалённые заголовки тоже есть в словаре, но уже в других карточках.
09-07-2011 18:56
Цитировать это сообщение
бкрс На форуме


Сообщений: 2 158
Польза: 4717.3

Сообщение: #7
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Может там какая-то система есть, чтобы эти 2000 конвертировать в словаре. Напр. несколько традиционных иероглифов, которые можно автоматически пройтись.

Ссылки в загрузку поставил, отсюда потом уберу.
09-09-2011 07:42
Цитировать это сообщение
Sapomaro Не на форуме


Сообщений: 201
Польза: 2862.6

Сообщение: #8
RE: 大БКРС 46+ 简体/繁體 в трёх частях
(09-09-2011 07:42)бкрс писал(а):  Может там какая-то система есть, чтобы эти 2000 конвертировать в словаре. Напр. несколько традиционных иероглифов, которые можно автоматически пройтись.

Я к ним приставил ещё упрощённое написание, должно работать (судя по статистике, оно есть к ~1000 из них, значит, не все они были только на полных вариантах, или, вероятнее, простые написания не добавились, потому что уже существовали в других карточках).
09-09-2011 14:29
Цитировать это сообщение
mingliya Не на форуме


Сообщений: 14
Польза: 77.6

Сообщение: #9
RE: 大БКРС 46+ 简体/繁體 в трёх частях
Ребят, подскажите, какой пароль, пожалуйста. Я еще не в курсе)
09-10-2011 01:21
Цитировать это сообщение
Sapomaro Не на форуме


Сообщений: 201
Польза: 2862.6

Сообщение: #10
RE: 大БКРС 46+ 简体/繁體 в трёх частях
(09-10-2011 01:21)mingliya писал(а):  Ребят, подскажите, какой пароль, пожалуйста. Я еще не в курсе)

Он в http://bkrs.info/download.php под ссылками (везде одинаковый)
09-10-2011 01:33
Цитировать это сообщение
Создать ответ 




Пользователи просматривают эту тему: 3 Гость(ей)