python+selenium自动化测试,selenium+python如何爬取简书网站

python+selenium自动化测试,selenium+python如何爬取简书网站详细介绍

本文目录一览： 怎么用python做自动化测试？

Python是一种广泛使用的编程语言，也被广泛应用于自动化测试领域。以下是用Python进行自动化测试的步骤：
安装 Python环境和所需的测试框架，如unittest、pytest或behave等。
编写测试用例。在编写测试用例时，需要明确测试的目标和预期结果，同时指定测试数据。
建立测试框架。测试框架是负责测试用例的执行、结果处理以及报告生成的重要组成部分。
运行测试用例。使用测试框架来运行测试用例并记录测试结果。
分析测试结果。分析测试结果以确定哪些测试失败，找出失败的原因，并修复故障。
重复测试过程，直到所有测试都通过。
使用Python进行自动化测试的优势在于它非常容易学习和使用，同时还支持各种类型的测试，如单元测试、集成测试和功能测试等。此外，Python还支持各种领域特定语言（DSL），如Behave，能够简化测试脚本的编写。
这里以web自动化测试为例，简单介绍一下如何使用python进行web自动化测试，主要用到selenium这个框架，实验环境win10+python3.6，主要内容如下：
1.首先，安装selenium框架，这个直接在cmd窗口输入命令“pipinstallselenium”就行，如下，安装非常快：
2.安装完成后，还需要安装浏览器驱动程序，不然直接运行程序会报错，以谷歌浏览器chrome为例，需要下载chromedriver驱动程序，如下，这里chromedriver的版本必须要与自己平台浏览器的版本匹配：
下载完成后，是一个zip压缩包，里面就一个chromedriver.exe文件，这里需要将这个文件复制到python安装目录下，如下：
3.最后，我们就可以进行selenium框架测试了，测试代码如下，非常简单，创建一个webdriver，如果能正常打开对应网页，则说明selenium安装成功：
之后就可以直接定位相关元素，进行web自动化测试了，主要方法如下（共有8种），分别是id、name、classname、tagname、linktext、partiallinktext、xpath和cssselector，这里可以自行测试，相关资料非常丰富：
至此，我们就完成了pythonweb自动化测试框架selenium的安装和简单使用。总的来说，整个过程非常简单，只要你有一定的python基础，熟悉一下上面的安装过程，很快就能搭建好本地selenium自动化测试框架，网上也有相关教程和资料，介绍的非常详细，感兴趣的话，可以搜一下，希望以上分享的内容能对你有所帮助吧，也欢迎大家评论、留言进行补充。

怎样开始用selenium进行自动化测试？

作为一个之前没接触过selenium的新手来说，如果之前有过写代码的经验，那么学习起来就会更加快速！但无论如何，开始总是比较难的！我也是从一个接近纯24K小白成长起来的，一步一个脚印，在这个过程中我学习到了很多新的知识，有了新的突破，新的成长，不断地努力，不断地尝试，不断地总结经验，让我一直走到了今天，未来，还有很多路要走！义无反顾，我的测试之路！所以，今天抽空回顾一下我的selenium学习过程，也就是，selenium自动化测试怎么开始，这些，是我的个人经验，分享出来给大家参考！一开始，基本上很多人都是用selenium IDE录制脚本开始的，我也是！有一本书写得很不错:selenium初学者指南！So，从录制回放开始我的selenium，而在这个过程中，不断地去补充我的html css知识，熟悉selenium的api！慢慢地，发现录制的脚本在回放的时候经常报错，通过检查发现，是定位上的错误，导致这种定位的错误的最大原因是系统前端采用了某种框架，如tigerUI,exj....所以HTML里面的标签很多都是动态的，比如id，class，name！这对selenium操作定位的元素而进行自动化来说是致命伤！所以，开始自己写定位信息，这已经是必须的了！从而学习了xpth和css选择器，掌握了更加有效，快速和稳定地定位页面上的元素（定位的时候难免会碰到有iframe，这就得先切换到iframe中再进行定位了）！也就是，在selenium IDE上写脚本！信心满满地在selenium IDE上写了长长地一段脚本，并且反复跑都能成功！总算尝到了一点点幸福的滋味！然后呢，问题来了，当我要修改和扩展这段的脚本的时候，才发现这效率是相当地低！一句句查！一句句改！多么痛的领悟！另外，selenium IDE 默认启动的是火狐，在使用selenium RC 启动 IE 进行跑脚本时浏览器总是会报错！各种搞不定，各种不淡定！决定放弃使用IDE！selenium有一个强大之处就是支持多种语方：java,C#,python等等，并且可以把录制的脚本转换成代码！我用的是java，果断走起！不用说，当然是把脚本转为java代码了，在Eclipse中重新开始搞！选择一个测试框架：有Junit和TestNg两个选择，公司用的是junit，所以，不用多说，我就用junit验证selenium脚本的运行结果！并且，Junit和TestNG都可以生成比较直观的测试报告！写好一些代码，会看到整段代码中密密麻麻充斥着基本相同的代码：开始封装代码！把常用到API封装起来！封装好之后代码看着就舒服多了！接下来，是不是也应该把代码中的定位信息用一个专门的文件放起来，再去读取里面的定位信息，这样，维护代码和维护定位信息就放在了两个地方，不用老是扎在代码和定位路径中，简单地分一下层！果断尝试！到这里，脚本写出来了，常用的api封装起来了，定位路径分离出来了！整个代码简洁多了！写起来容易和舒服多了！这时候，该个性化定制一下自己的框架了，这里，就暂时不写下去了，已经离怎样开始selenium挺远的了！或许，到了这一步，你早就有自己对测试框架的想法和对脚本的设计方法了。。。。加油吧，把想法化为实际的动力，继续向前！

python3+selenium自动化测试-下拉选择框13

（13）下拉选择框 selenium的下拉选择框。我们通常会遇到两种下拉框，一种使用的是html的 标签select ，另一种是使用 input标签 做的假下拉框。 标签select ：需要用到 Select类 ，先要导入select方法， from selenium.webdriver.support.select import Select input标签 ：通常的处理方式与其他的元素类似，点击或使用JS等。
认识一下select下拉框选择： 每页显示10条 每页显示20条 每页显示50条 定位： 1、通过select选项的索引来定位选择对应选项（从0开始计数），如选择第三个选项:select_by_index(2) 2、通过选项的value值来定位，select_by_value("20") 3、通过选项的文本内容来定位。select_by_visible_text("每页显示50条") Select提供了三种 选择方法 ： select_by_index(index) ——通过选项的顺序，第一个为 0 select_by_value(value) ——通过value属性 select_by_visible_text(text) ——通过选项可见文本 同时，Select提供了四种方法 取消选择 ： deselect_by_index(index) --取消对应index选项 deselect_by_value(value) --取消对应value选项 deselect_by_visible_text(text) --取消对应文本选项 deselect_all() --取消所有选项 Select为你提供了相应的方法（或者应该说是属性了）,用来查看选中了哪一项： options ——提供所有的选项的列表，其中都是选项的WebElement元素 all_selected_options ——提供所有被选中的选项的列表，其中也均为选项的WebElement元素 first_selected_option ——提供第一个被选中的选项，也是下拉框的默认值Python自动化测试框架有哪些？ 1、Unittest是python内置的标准类库，它的API跟java的Junit、.net的NUnit、C++的CppUnit很相似，通过继承unittest.TestCase来创建一个测试用例。2、 DoctestDoctest模块会搜索那些看起来像交互式会话的python代码片段，然后尝试执行并验证结果，即使从来没有接触过Doctest，我们也可以从这个名字中窥到一丝端倪，它看起来就好像代码里的文档字符串(docstring)一样。3、py.test是python的一种单元测试框架，与python自带的unittest测试框架类似，但是比unittest框架使用起来更加简洁、效率更高;根据官方介绍，它具有以下特点：非常容易上手、入门简单、文档丰富，有很多实例可以参考;能够支持简单的单元测试和复杂的功能测试;支持参数化;支持重复执行失败的case。4、NoseNose是对unittest的扩展，使得python的测试更加简单，Nose自动发现测试代码并执行，提供了大量的插件，nose不是python自带模块，需要用pip安装。5、tox最大的特色，是自动化测试环境的管理以及使用多个解析器配置进行测试;6、Unittest2是Unittest的升级版本，对API进行了改善以及更好的诊断语法。有很多，目前比较常用的是RobotFramework框架。兼容性很好，同时可以满足java、c、python模块的调用图形界面，有操作有内置方法函数，很多扩展模块，很方便1、Pytest适用于多种软件测试的Pytest，是另一个Python类型的自动化测试框架。凭借着其开源和易学的特点，该工具经常被QA团队、开发团队、个人团队以及各种开源项目所使用。鉴于Pytest具有断言重写之类的实用功能，许多大型互联网应用，如Dropbox和Mozilla，都已经从下面将要提到的unittest切换到Pytest之上。2、Robot Framework作为重要的Python测试框架之一，Robot Framework主要被用在测试驱动类型的开发与验收中。虽然是由Python开发而来，但是它也可以在基于.net的IronPython和基于Java的Jython上运行。同时，作为一个Python框架，Robot还能够兼容诸如Windows、MacOS、以及Linux等平台。3、UnitTest/PyUnit受到了JUnit启发的UnitTest/PyUnit，也是一种标准化的针对单元测试的Python类自动化测试框架。它的基类TestCase提供了各种断言方法、以及所有清理和设置的例程。因此，TestCase子类中的每一种方法都是以test作为名词前缀，以标识它们能够被作为测试用例所运行。用户可以使用load方法和TestSuite类来分组、并加载各种测试。当然，您也可以通过联合使用，来构建自定义的测试运行器。正如我们使用Junit去测试selenium那样，UnitTest也会用到UnitTest-sml-reporting、并能生成各种xml类型的报告。4、Behave我们都知道：行为驱动开发，是一种基于敏捷软件开发的方法。它能够鼓励开发人员、业务参与者和QA人员，三者之间的协作。作为另一种Python测试框架，Behave允许团队避开各种复杂的情况，去执行BDD测试。从本质上说，该框架与SpecFlow和Cucumber非常相似，常被用于执行自动化测试。用户可以通过简单易读的语言来编写测试用例，并能够在其执行期间粘贴到代码之中。而且，那些被设定的行为规范与步骤，也可以被重用到其他的测试方案中。5、LettuceLettuce是另一种基于Cucumber和Python的行为驱动类自动化工具。Lettuce主要专注于那些具有行为驱动开发特征的普通任务。它不但简单易用，而且能够使得整个测试过程更流畅、甚至更有趣。python3+selenium自动化测试-js解决click失效问题21 （21）js解决click失效问题 有时候元素明明已经找到了，运行也没报错，点击后页面没任何反应。 第一种解决办法：先点击它的父元素一次，然后再点击这个元素； 第二种解决方法：用js直接执行点击事件。 from selenium import webdriver from selenium.webdriver.common.action_chains import ActionChains # 模拟鼠标操作 from selenium.webdriver.support.select import Select # 下拉框需要引入 import time driver = webdriver.Chrome() url = " https://www.baidu.com " driver.get(url) time.sleep(3) mouse = driver.find_element("link text", "设置") ActionChains(driver).move_to_element(mouse).perform() time.sleep(3) driver.find_element("link text", "搜索设置").click() time.sleep(3) s = driver.find_element("id", "nr") Select(s).select_by_visible_text("每页显示50条") js = 'document.getElementsByClassName("prefpanelgo")[0].click();' driver.execute_script(js)自动化测试常用工具有哪些？ 自动化测试的问题我们已经探讨了很多次了，所以今天我们就给大家简单分享了在自动化测试过程中常用的一些测试工具和方法，下面java课程就一起来了解一下吧。希望通过对本文的阅读，能够提高大家对自动化测试的认识和理解。1.带RobotFramework的SeleniumSelenium无疑是受欢迎的Web自动化测试工具。其开源的特性是被广泛使用的原因之一。您可以使用不同的语言在Selenium中实施各种框架，从而为自动化测试提供更多的功能。Selenium能够支持多种操作系统(Windows、Mac、Linux)和多种浏览器(Chrome、火狐、IE和Headless类型浏览器)。我们可以运用多种语言(如Java、Groovy、Python、C#、PHP、Ruby和Perl)来开发出不同的测试脚本。Selenium内置了许多工具和框架，您可以启用它们来进行持续测试。RobotFramework是Selenium用来进行持续测试的一种常用的框架。通过Robot，您可以运行各种自动化测试，包括由SeleniumWebdriver所提供的、基于UI元素和API的测试。Selenium既可以使用关键字驱动的方法进行验收测试，也可以进行验收测试驱动式的开发(AcceptanceTest-DrivenDevelopment，ATDD)。通过使用Python和Java所实现的附加测试库，其测试功能得到了进一步扩展。而RobotFramework不仅可以用于Web应用的测试，也可被用来测试Android和iOS的应用。但是，Selenium本身并不能满足所有的持续测试需求。它需要与大量的工具相集成，以满足在软件开发生命周期(SDLC)中的不同目的。此外，Selenium还需要使用者具有高级的编程技能，并愿意花费专门的时间与精力，来构建自动化框架，以满足其特定的测试需求。2.TestsigmaTestsigma是一个统一的、以AI驱动测试的自动化平台。它采用Shift-Left方法，将持续测试集成到了端到端的持续交付生态系统之中。Testsigma通过减少自动化测试技术中的复杂性，为功能和自动化团队带来了更多的灵活性。功能测试人员可以轻松地使用自然语言，编写出简化的代码，来进行自动化测试。Testsigma通过可重用的步骤组合、与集中对象存储库(CentralizedObjectRepository)大限度地提高了测试代码的重用性。同时它通过使用AI，来大幅降低了与测试有关的维护开销。Testsigma能够与各种开源的或三方工具相集成。它支持上千种不同“设备+浏览器+操作系统”组合的云端测试环境，以不断满足各种的动态测试需求。Testsigma能为企业级的自动化测试、和持续测试提供所有必需的功能，其中包括：数据驱动测试、跨浏览器测试、可重用性测试套件、测试计划与数据管理、电子邮件与Slack通知、并行测试执行、集中对象/元素存储库、综合报告、与CI工具的集成、以及自动化Bug报告等。作为一款基于云端的自动化测试工具，Testsigma为Web、移动Web、Android、iOS应用、以及RESTful服务提供了各种类型的应用支持。3.IBMRationalFunctionalTesterRFT是另一种能够进行功能、API、性能和回归测试的工具。RationalFunctionalTester使用记录和回放来创建自动化的功能测试，并将预期结果与执行时系统所产生的实际结果相比较。IBM支持广泛的应用程序，并能够与IBMRationalQualityManager等工具相集成。另外，IBMRationalTestWorkbench还支持在API级别、用户界面级别、以及整个系统级别进行回归测试，以实现在DevOps或持续交付生命周期内的各种测试目标。前端是vue框架如何用python+selenium做自动化测试 你好，下面是一个简单的python+selenium的例子：from selenium import webdriverimport timedriver = webdriver.Chrome()driver.get("http://www.baidu.com")print(driver.title)driver.find_element_by_id("kw").send_keys("selenium")driver.find_element_by_id("su").click()time.sleep(3)driver.close()webdriver.Chrome()：创建一个Chrome浏览器的webdriver实例driver.get(“http://www.baidu.com“)：打开”http://www.baidu.com“页面driver.find_element_by_id(“kw”).send_keys(“selenium”)：找到id为“kw”的元素，在这个页面上为百度首页的搜索框，在其中输入“selenium”driver.find_element_by_id(“su”).click()：找到id为“su”的元素并点击，在这个页面上为百度首页的“百度一下”按钮driver.close()：退出浏览器selenium+python如何爬取简书网站 jianshu首页打开chrome的开发者模式，发现文章的标题，href都在a标签里，似乎也没有什么不一样的a.png接下来就是寻找页面上所有的a标签，但是且慢如果你仔细观察就会发现滑轮滚到一半的时候页面就会加载更多，这样的步骤会重复三次知道底部出现阅读更多的按钮滑轮不仅如此底部的阅读更多的href并没有告诉我们加载剩下的页面信息，唯一的办法是不断点击阅读更多这个按钮load_more.png什么，将滑轮重复三次滑倒页面的中央并且不断点击按钮这种操作http请求可做不到，这更像是js操作？没错，简书的文章并不是常规的http请求，我们不能根据不同url不断重定向，而是页面的一些动作来加载页面信息。selenium介绍selenium是一个web自动化测试工具，支持很多种语言，我们在这里可以使用python的selenium做爬虫使用，爬取简书的过程中，它的工作原理是不断注入js代码，让页面源源不断的加载，最后再提取所有的a标签。首先你得在python中下载selenium包>>> pip3 install seleniumchromedriverselenium必须搭载浏览器使用，这里我使用的是chromedriver，Chrome的开源测试版，它可以使用headless模式不需要显示前段来访问网页，算是最大特性了。python中操作在写代码之前一定要把chromedriver同一文件夹内，因为我们需要引用PATH，这样方便点。首先我们的第一个任务是刷出加载更多的按钮，需要做3次将滑轮重复三次滑倒页面的中央，这里方便起见我滑到了底部from selenium import webdriverimport timebrowser = webdriver.Chrome("./chromedriver")browser.get("https://www.jianshu.com/")for i in range(3): browser.execute_script("window.scrollTo(0, document.body.scrollHeight);") // execute_script是插入js代码的 time.sleep(2) //加载需要时间，2秒比较合理看看效果刷出了按钮接下来就是不断点击按钮加载页面，继续加入刚才的py文件之中for j in range(10): //这里我模拟10次点击 try: button = browser.execute_script("var a = document.getElementsByClassName('load-more'); a[0].click();") time.sleep(2) except: pass''' 上面的js代码说明一下 var a = document.getElementsByClassName('load-more');选择load-more这个元素 a[0].click(); 因为a是一个集合，索引0然后执行click()函数'''这个我就不贴图了，成功之后就是不断地加载页面 ，知道循环完了为止，接下来的工作就简单很多了，就是寻找a标签，get其中的text和href属性,这里我直接把它们写在了txt文件之中.titles = browser.find_elements_by_class_name("title")with open("article_jianshu.txt", "w", encoding="utf-8") as f: for t in titles: try: f.write(t.text + " " + t.get_attribute("href")) f.write("") except TypeError: pass最终结果简书文章headless模式不断加载页面肯定也很烦人，所以我们测试成功之后并不想把浏览器显示出来，这需要加上headless模式options = webdriver.ChromeOptions()options.add_argument('headless')browser = webdriver.Chrome("./chromedriver", chrome_options=options) //把上面的browser加入chrome_options参数总结当我们没办法使用正常的http请求爬取时，可以使用selenium操纵浏览器来抓取我们想要的内容，这样有利有弊，比如优点可以暴力爬虫简书并不需要cookie才能查看文章，不需要费劲心思找代理，或者说我们可以无限抓取并且不会被ban首页应该为ajax传输，不需要额外的http请求缺点爬取速度太满，想象我们的程序，点击一次需要等待2秒那么点击600次需要1200秒, 20分钟...附加这是所有完整的代码from selenium import webdriverimport timeoptions = webdriver.ChromeOptions()options.add_argument('headless')browser = webdriver.Chrome("./chromedriver", chrome_options=options)browser.get("https://www.jianshu.com/")for i in range(3): browser.execute_script("window.scrollTo(0, document.body.scrollHeight);") time.sleep(2)# print(browser)for j in range(10): try: button = browser.execute_script("var a = document.getElementsByClassName('load-more'); a[0].click();") time.sleep(2) except: pass#titles = browser.find_elements_by_class_name("title")with open("article_jianshu.txt", "w", encoding="utf-8") as f: for t in titles: try: f.write(t.text + " " + t.get_attribute("href")) f.write("") except TypeError: pass相关推荐：《Selenium2自动化测试实战基于Python语言》epub下载在线阅读全文，求百度网盘云资源 《Selenium 2自动化测试实战》（虫师）电子书网盘下载免费在线阅读链接: https://pan.baidu.com/s/10-u3cNcxi8pZlq2FEpkv4A 提取码: egvs书名：Selenium 2自动化测试实战作者：虫师豆瓣评分：8.1出版社：电子工业出版社出版年份：2016-1-1页数：324内容简介：《Selenium 2自动化测试实战——基于Python语言》共分 14 章。第 1 章是自动化测试相关基础知识的介绍；第 2 章到第 10 章是《Selenium 2自动化测试实战——基于Python语言》的重点，循 序渐进地介绍了自动化测试所用到的技术；第 11 章通过一个具体的项目综合运用了前面章节所介绍 的技术与技巧；第 12 章到第 14 章选取了当前最热门的技术进行了介绍，旨在扩展测试人员的综合技 术能力。 《Selenium 2自动化测试实战——基于Python语言》的写作目的并不是为了简单地告诉读者如何使用一个自动化测试工具，而是希望读者在学习《Selenium 2自动化测试实战——基于Python语言》的内容后能够提高综合的技术高度与宽度，从而摆脱简单的手工测试，向高级测试工程师的道路 迈进。如何用python做自动化测试 当然可以1、编写Python版本的minicom，这个是自动化测试日志记录的需要用于控制串口输出的字符颜色，高亮显示出错信息，方便开发者在线调试问题2、控制程控电源、程控开关，这些可以自动化测试的硬件基础3、写整套测试框架，控制整个测试交互流程，Case管理等等Python运行起来效率没那么高，但是对于编写来说是非常高效的。用python做自动化测试，主要是接口测试和UI自动化测试。一、接口测试： http协议的举例: 可以用python自带的urllib\urllib2模拟，模拟前端向服务器发送数据，获取返回值后，进行校验和判断来进行接口测试。 网上的例子也比较多，这里简单说一下， 比如request中data的边界值测试、字符测试、非空为空测试等等，都可以做二、UI自动化测试： html页面（python+selenium）或者一些安卓app(python+appiun)可以用。 主要是页面元素的检查、输入等。 比如可以写一个脚本，自动登录百度页面，搜索某一个关键字，并且获得此关键字的百度搜索数量。 少长咸集 上一篇 vlookup公式,vlookup公式是什么？ 发表于2024-05-11 浏览7 评论0 下一篇 java switch语句怎么用,javajava问题，题目要求用switch语句 发表于2024-05-11 浏览9 评论0 网站分类 编程语言 97300 硬件开发 79839 前沿技术 95715 资讯 76870 最近发表 2025-02-21linux mac地址 2025-02-21linux的mac地址 2025-02-21linux mac 2025-02-21ubuntu怎么看mac地址 2025-02-21linux自动补全命令快捷键 2025-02-21macos是linux吗 2025-02-21linux mac地址命令 2025-02-21macos基于linux还是unix 2025-02-21查看mac地址的命令linux 2025-02-21ubuntu mac 最新留言 © 2025 技术 Copyright Your WebSite.Some Rights Reserved.皖ICP备2023002134号 Powered By Z-Blog Theme By 吉光片羽