Selenium python递归文本抓取

Question

下面是此链接here中的一小段html

<div class="price-view">
  <div class="price component component-3 clearfix list-and-sale-price">
    <div class="list-price float-left mR20px striken">
      <label>Was</label>
      <div class="value">$250.00</div>
    </div>
    <div class="sale-price float-left">
      <label>Now</label>
      <div class="value">$150.00</div>
    </div>
  </div>
</div>

我试图拉价格$150在这种情况下，但我希望相同的代码打印$575在this链接

<div class="price-view">
  <div class="price component component-3 clearfix">
    <div class="list-price float-left mR20px ">
      <div class="value">$575.00</div>
     </div>
  </div>
</div>

由于显而易见的原因，下面的xpath代码不能在多个实例中工作。

price = driver.find_element_by_xpath('//*[@id="saksBody"]/div[4]/div[1]/div[2]/div[1]/div[6]/div/div/div/div').text

所以，我试着像这样研究代码：

price = driver.find_element_by_class_name('value')

但是，这还不够具体。

有什么方法可以打印<div class="price-view">中的所有文本吗？然后我可以使用正则表达式来解决剩下的问题。

这段代码似乎没有抓取标记中标记内的文本

price = driver.find_element_by_class_name('price-view').text

具体地说，我想知道如何输出：

Was$250.00Now$150.00

和

$575.00

分别用于第一和第二链接。

Answer 1

在这两种情况下，定价都是在带有price-view类的DIV中进行的，因此我们使用CSS选择器div.price-view来获取外部元素。然后，它会查看list-and-sale-price类是否存在。如果是这样，那么我们有一个列表和销售价格，所以抓住销售价格。无论哪种方式，价目表价格都存在，所以我们要抓住它。通过这种方式，您不必对各个部分执行正则表达式。

priceView = driver.find_element_by_css_selector("div.price-view")
if (priceView.find_elements_by_css_selector("div.list-and-sale-price"))
    # there is a list and sale price, grab the sale price
    salePrice = priceView.find_element_by_css_selector("div.sale-price > div.value")).text
# in either case, grab the list price
listPrice = priceView.find_element_by_css_selector("div.list-price > div.value")).text