Gate / ANNIE при использовании корпуса с большим количеством документов

Я работаю над проектом на платформе GATE с использованием плагина ANNIE, к сожалению, когда я пытаюсь запустить приложение Annie для большого количества документов, GATE зависает и перестает работать, поэтому мне нужно только его выключить. Это проблема моей машины? Я могу что-нибудь сделать? Единственное решение - запускать приложение для нескольких файлов одновременно?

Думаю, это связано с потреблением памяти Java. Но сложно догадаться, вы не предоставили никаких подробностей об этом (размер данных - документы, сколько памяти было занято во время зависания, сколько процессора занимает в это время, некоторые сообщения формируют журнал ?).

dedek 12.12.2018 06:37

Вы правы, файлы вместе 298, 23,8 МБ. В журнале нет сообщений, так как он зависает, и я не могу ничего сделать.

Luca De Prisco 17.12.2018 17:06

Можно попробовать увеличить лимит памяти: gate.ac.uk/sale/tao/…

dedek 17.12.2018 17:18
Тонкая настройка GPT-3 с помощью Anaconda
Тонкая настройка GPT-3 с помощью Anaconda
Зарегистрируйте аккаунт Open ai, а затем получите ключ API ниже.
0
3
51
1

Ответы 1

Вы можете использовать последовательное хранилище данных для большого количества документов. «Как сделать» вы можете найти в руководстве GATE и некоторых примерах кода в GATE wiki.

Другие вопросы по теме