UGENE Forum
https://forum.ugene.net/forum/YaBB.pl
General Category >> Forum in Russian language ([ch1056][ch1091][ch1089][ch1089][ch1082][ch1086][ch1103][ch1079][ch1099][ch1095][ch1085][ch1099][ch1081] [ch1092][ch1086][ch1088][ch1091][ch1084]) >> Падение при построении БД большого полногеномного выравнивания.
https://forum.ugene.net/forum/YaBB.pl?num=1402231590

Message started by Ilya Flyamer on Jun 8th, 2014 at 7:46pm

Title: Падение при построении БД большого полногеномного выравнивания.
Post by Ilya Flyamer on Jun 8th, 2014 at 7:46pm
При открытии (создании БД) большого выравнивания (.bam) использование памяти растет до максимума (80% от 8Гб + система полностью использует swap), после какого-то времени ugene просто падает без окон с ошибками. К сожалению, это занимает длительное время, поэтому повторить с запуском в терминале я пока не могу - в это время компьютер использовать невозможно.
bam-файл весит 1.2-1.3 Гб. При работе с файлами меньшего размера (в частности ок. 300 Мб) все работает великолепно (да и вообще, просмотрщик выравниваний - супер!). Особенность моих выравниваний - огромное покрытие в одном месте и недалеко от него (порядка сотен тысяч ридов), не знаю, может ли это повлиять; выравнивание на мышиный геном. Ugene 1.13.3 на Ubuntu 14.04.

Title: Re: Падение при построении БД большого полногеномного выравнивания.
Post by Olga Golosova on Jun 9th, 2014 at 5:35pm
Здравствуйте, Илья! Спасибо за отзыв!

На наших тестовых данных примерно такого же размера (1.3 Гб) ошибка не воспроизводится. Вы не могли дать ссылку на какие-нибудь тестовые данные, на которых у вас воспроизводится ошибка?

Title: Re: Падение при построении БД большого полногеномного выравнивания.
Post by Ilya Flyamer on Jun 11th, 2014 at 9:06pm
Здравствуйте, Ольга!

К сожалению, это довольно сложно, пришлось бы загрузить такой большой файл куда-то в облако что ли... К сожалению, у меня на выкачку очень медленный интернет.
А сейчас и вообще сломался компьютер с данными :(
Может, я как-то еще могу помочь, чтобы понять, в чем проблема?

Title: Re: Падение при построении БД большого полногеномного выравнивания.
Post by Olga Golosova on Jun 15th, 2014 at 3:37pm
Здравствуйте, Илья!

Я правильно понимаю, что сломался как раз тот компьютер, на котором повторялась ошибка? Может это проблемы из-за компьютера были? Какие у этого компьютера характеристики?

Есть ли у вас возможность проверить у себя локально те же данные в UGENE на каком-нибудь другом компьютере?

Воспроизводилась ли ошибка на каких-нибудь других публично доступных в Интернете данных?

Title: Re: Падение при построении БД большого полногеномного выравнивания.
Post by Ilya Flyamer on Jun 15th, 2014 at 11:27pm
Да, к сожалению, именно тот. Вряд ли проблему из-за компьютера, поломка явно железная и очень специфическая. У него 4х-ядерный i7, 8 Гб оперативной памяти. MSI GE40.

К сожалению, другого адекватного компьютера сейчас в наличии нет, жду тот из сервиса...

Ни на каких других данных не пробовал, промежуток между возникновением ошибки и поломкой был очень небольшой. Но вообще это были данные либо напрямую от Bowtie2, либо после несложной фильтрации с помощью pysam - думаю, с ними все должно было быть в порядке (и ровно такие же по методу получения данные, но небольшого размера, обрабатывались на ура).

Title: Re: Падение при построении БД большого полногеномного выравнивания.
Post by Ilya Flyamer on Oct 10th, 2014 at 12:05am
Отмечу, что теперь (на 1.14.1) эта проблема не наблюдается, несмотря на то, что чтобы построить базу юджину может потребоваться очень много времени (порядка часа). Точка с самым большим покрытием - 11 миллионов ридов, навигация вокруг нее происходит с большими тормозами.

UGENE Forum » Powered by YaBB 2.5 AE!
YaBB Forum Software © 2000-2010. All Rights Reserved.