from selenium import webdriver from time import sleep from selenium.webdriver.common.by import By chrome=webdriver.Chrome() #京东需要下拉才能显示全部数据,不然只显示三十条数据 chrome.get('https://search.jd.com/Search?keyword=imac') #拉动滚动条语句 js='document.documentElement.scrollTop=10000' #在浏览器执行滚动条语句 chrome.execute_script(js) sleep(2) #休眠两秒再去滚动条,不然太快系统反应不过来只能爬取到三十条 #这个方法停用了不过也可以使用 #info=chrome.find_elements_by_xpath('//div[@class="p-name p-name-type-2"]/a/em') #Python推荐使用这个 获取想要的Xpath信息 info=chrome.find_elements(by=By.XPATH, value='//div[@class="p-name p-name-type-2"]/a/em') for i in info: #对得到的信息进行遍历 以文本方式输出 print(i.text) print(len(info)) #测试打印内容共多少,六十为页内全部内容