Как использовать lxml для захвата определенных частей XML-документа?

Поскольку вы получаете весь ответ в виде одной большой строки XML, вы можете использовать метод 'fromstring' в lxml, чтобы преобразовать его в полный объект ElementTree. Затем вы можете использовать функцию findall (или на самом деле, поскольку вы хотите перебирать результаты, функцию iterfind), но есть одна загвоздка: XML-ответы Amazon имеют пространство имен, поэтому вы должны учитывать это, чтобы библиотеки lxml правильно его искать. Что-то вроде этого должно помочь:

root=etree.fromstring(responseFromAmazon)

# this creates a constant with the namespace in the form that lxml can use it
AMAZON_NS="{http://webservices.amazon.com/AWSECommerceService/2009-10-01}"

# this searches the tree and iterates over results, taking the namespace into account
for eachitem in root.iterfind(".//"+AMAZON_NS+"ItemAttributes"):
   for key,value in eachitem.items():
        if key == 'ISBN':
              # Do your stuff
        if key == 'Title':
              # Do your stuff

ИЗМЕНИТЬ 1

Посмотрите, работает ли это лучше:

root=etree.fromstring(responseFromAmazon)
AMAZON_NS="{http://webservices.amazon.com/AWSECommerceService/2009-10-01}"
item={}    
for attr in root.iterfind(".//"+AMAZON_NS+"ItemAttributes"):
     item[attr[0].tag.replace(AMAZON_NS,"")]=attr[0].text

Затем вы можете получить доступ к элементу ["Название"], элементу ["ISBN"] и т. д. по мере необходимости.

Это протестировано для работы как с lxml.etree, так и с xml.etree.cElementTree под управлением Python 2.7.1.

import lxml.etree as ET
# Also works with cElementTree (included in recent standard CPythons).
# Use this import:
# import xml.etree.cElementTree as ET
t = ET.fromstring(xmlstring) # your data -- with 2 missing tags added at the end :-)
AMAZON_NS = "{http://webservices.amazon.com/AWSECommerceService/2009-10-01}"
# Find all ItemAttributes elements.
for ia in t.iter(AMAZON_NS+'ItemAttributes'):
    # An ItemAttributes element has *children* named ISBN, Title, Author, etc.
    # NOTE WELL: *children* not *attributes*
    for tag in ('ISBN', 'Title'):
        # Find the first child with that name ...
        elem = ia.find(AMAZON_NS+tag)
        print "%s: %r" % (tag, elem.text)

Вывод:

ISBN: '0534950973'
Title: 'Introduction to the Theory of Computation'

Если вы хотите создать словарь всех дочерних элементов узла ItemAttributes, потребуется лишь небольшая вариация:

import lxml.etree as ET
# Also works with cElementTree (included in recent standard CPythons).
# Use this import:
# import xml.etree.cElementTree as ET
from pprint import pprint as pp
t = ET.fromstring(xmlstring)
AMAZON_NS = "{http://webservices.amazon.com/AWSECommerceService/2009-10-01}"
TAGPOS = len(AMAZON_NS)
# Find all ItemAttributes elements.
for ia in t.iter(AMAZON_NS+'ItemAttributes'):
    item = {}
    # Iterate over all the children of the ItemAttributes node
    for elem in ia:
        # remove namespace stuff from key, remove extraneous whitepace from value
        item[elem.tag[TAGPOS:]] = elem.text.strip()
    pp(item)

и вывод:

{'Author': 'Michael Sipser',
 'Binding': 'Hardcover',
 'DeweyDecimalNumber': '511.35',
 'EAN': '9780534950972',
 'Edition': '2',
 'ISBN': '0534950973',
 'IsEligibleForTradeIn': '1',
 'Label': 'Course Technology',
 'Languages': '',
 'ListPrice': '',
 'Manufacturer': 'Course Technology',
 'NumberOfItems': '1',
 'NumberOfPages': '400',
 'PackageDimensions': '',
 'ProductGroup': 'Book',
 'ProductTypeName': 'ABIS_BOOK',
 'PublicationDate': '2005-02-15',
 'Publisher': 'Course Technology',
 'Studio': 'Course Technology',
 'Title': 'Introduction to the Theory of Computation',
 'TradeInValue': ''}

Я бы рекомендовал сначала использовать pyaws. Тогда вам не придется беспокоиться о синтаксическом анализе XML. Если нет, вы можете использовать что-то для эффекта:

from lxml import etree

tree = etree.parse(xmlResponse)
tree.xpath('//ISBN')[0].text

from lxml import etree
root = etree.XML("YourXMLData")  
items = root.findall('.//ItemAttributes')
for eachitem in items:
    for key,value in eachitem.items():
        if key == 'ISBN':
              # Do your stuff
        if key == 'Title':
              # Do your stuff

Это один из способов сделать это. Вы можете поиграть с этим, при этом вместо загрузки XML в виде строки вы можете использовать метод синтаксического анализа. Но ключевой момент заключается в использовании метода find и его друзей, чтобы перейти к вашему конкретному узлу, а затем выполнить итерацию по словарю узла.