Я хочу знать, есть ли у кого-нибудь опыт удаления миллионов документов в Marklogic? На данный момент я использовал простые xqueries для получения URI документов, которые необходимо удалить, а затем я использую corb для пакетной обработки всей операции.
Есть ли более быстрый способ удалить миллионы документов, если у меня есть список Uris?
Есть несколько способов решить эту проблему. Первый вопрос: как получить URI документа? Лучший подход для этого - использовать лексикон URI и cts:uris или cts:uri-match. Во-вторых, как вы выполняете удаление. Вы можете перебирать найденные uri и вызывать xdmp:document-delete для каждого, но вы можете пропустить все вышеперечисленное и полностью вернуться к xdmp:collection-delete. Кажется, это работает очень эффективно. Это требует, чтобы у вас был назначен уникальный ярлык коллекции, и его можно полностью удалить.
HTH!
Вызов xdmp:spawn или _ 2_ может быть немного быстрее, чем corb, просто потому, что он избегает сетевого обхода.
Если документы организованы для этого, xdmp:collection-delete или xdmp:directory-delete также могут быть быстрее. Но в идеале коллекции или каталоги должны содержать около 1000-100000 документов каждый.
Наконец, если вы хотите избавиться от всего, было бы намного быстрее очистить лес или базу данных. Может быть даже быстрее экспортировать то, что вы хотите сохранить (возможно, используя XQSync), очистить базу данных, а затем повторно импортировать.
Также обратите внимание, что если у вас включено создание каталогов, удаление происходит значительно медленнее. Если вам не нужны директории (действительно нужны только для WEBDAV), я предлагаю не использовать каталоги, тогда удаление будет намного быстрее.
