xml - 巨大な XML の要素の遅延解析

Question

OTDSファイルを処理しています。簡単に言えば、それらは大量のデータを含む XML であり、15GB を超える可能性があります。

これらのファイルを効率的に処理するために、scalesXmlライブラリを選択しました。

例を示しましょう。

<?xml version="1.0" encoding="UTF-8"?>
<Otds UpdateMode="Merge"
xmlns="http://otds-group.org/otds"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
Version="1.9.1" xsi:schemaLocation="http://otds-group.org/otds ../xsd/otds.xsd">
 <Brands>
     ...
 </Brands>
 <Accommodations>
  <Accommodation Key="A">
   ...
   <SellingAccom>
    ...
    <PriceItems Key="1">...</PriceItems>
    ...
   </SellingAccom>
   ...
  </Accommodation>

...  <!-- A lot of <Accomodation> tags -->

  <Accommodation Key="Z">
  ...
  </Accommodation>
  <PriceItems Key="Global1"></PriceItems>   <!-- Collect all of these     -->
  <PriceItems Key="Global2"></PriceItems>
 </Accommodations>
</Otds>

問題に遭遇しました。XML には、大量の<Accomodation>タグが含まれています。タグの直接の子であるすべて<PriceItems>を抽出します。<Accommodations>

私は実際の簡略化されたファイルを作成しました:

<?xml version="1.0" encoding="UTF-8"?>
<Otds UpdateMode="Merge"
xmlns="http://otds-group.org/otds"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
Version="1.9.1" xsi:schemaLocation="http://otds-group.org/otds ../xsd/otds.xsd">
 <Brands>
  <Brand>EBIWA</Brand>
 </Brands>
 <Accommodations>
  <Accommodation Key="ATH432">
   <SellingAccom>
    <PriceItems Key="1"></PriceItems>
   </SellingAccom>
  </Accommodation>
  <Accommodation Key="ATH433">
   <SellingAccom>
    <PriceItems Key="2"></PriceItems>
   </SellingAccom>
  </Accommodation>
  <PriceItems Key="Global"></PriceItems>
 </Accommodations>
</Otds>

私の現在のアプローチ：

1. 期待される最後のものだけでなく、すべての PriceItems に対して Iterator[PriceItems] を返します

   val ns = Namespace("http://otds-group.org/otds")
   val Otds = ns("Otds")
   val Accommodations = ns("Accommodations")
   val PriceItems = ns("PriceItems")
   val Accommodation = ns("Accommodation")
   
   val priceItemsPath = List(Otds, Accommodations, PriceItems)
   
   val xml = pullXml(inputstream, optimisationStrategy = QNameElemTreeOptimisation)
   
   val itr = iterate(priceItemsPath, xml)
   
   for {
     priceItems <- itr
   } yield {
     val parsedJson = parseXml(priceItems)
     val result = parsedJson.children.head.extract[PriceItems]
     result
   }
   

全体を解析せずに、この巨大なファイルの末尾にある要素をすばやく抽出するにはどうすればよいですか?