20) Найти неработающие ссылки

Что такое неработающие ссылки?

Нерабочие ссылки — это ссылки или URL-адреса, которые недоступны. Они могут быть недоступны или не работают из-за какой-либо ошибки сервера

URL всегда будет иметь статус 2xx, который действителен. Существуют разные коды состояния HTTP, которые имеют разные цели. Для недействительного запроса статус HTTP 4xx и 5xx.

Класс кодов состояния 4xx в основном предназначен для ошибок на стороне клиента, а класс кодов состояния 5xx главным образом для ошибок ответа сервера.

Скорее всего, мы не сможем подтвердить, работает ли эта ссылка или нет, пока мы не щелкнем и не подтвердим ее.

Зачем вам проверять неработающие ссылки?

Вы должны всегда следить за тем, чтобы на сайте не было неработающих ссылок, поскольку пользователь не должен попадать на страницу с ошибкой.

Ошибка происходит, если правила не обновлены правильно, или запрошенные ресурсы не существуют на сервере.

Ручная проверка ссылок является утомительной задачей, поскольку каждая веб-страница может содержать большое количество ссылок, и ручной процесс должен повторяться для всех страниц.

Сценарий автоматизации, использующий Selenium, который автоматизирует процесс, является более подходящим решением.

Как проверить неработающие ссылки и изображения

Для проверки неработающих ссылок вам необходимо выполнить следующие шаги.

1. Соберите все ссылки на веб-странице на основе тега <a>.
2. Отправьте HTTP-запрос на ссылку и прочитайте HTTP-код ответа.
3. Узнайте, является ли ссылка действительной или неработающей, основываясь на коде ответа HTTP.
4. Повторите это для всех захваченных ссылок.

Код для поиска неработающих ссылок на веб-странице

Ниже приведен код веб-драйвера, который тестирует наш вариант использования:

package automationPractice;

import java.io.IOException;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.Iterator;
import java.util.List;

import org.openqa.selenium.By;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.WebElement;
import org.openqa.selenium.chrome.ChromeDriver;

public class BrokenLinks {
    
    private static WebDriver driver = null;

    public static void main(String[] args) {
        // TODO Auto-generated method stub
        
        String homePage = "http://www.zlti.com";
        String url = "";
        HttpURLConnection huc = null;
        int respCode = 200;
        
        driver = new ChromeDriver();
        
        driver.manage().window().maximize();
        
        driver.get(homePage);
        
        List<WebElement> links = driver.findElements(By.tagName("a"));
        
        Iterator<WebElement> it = links.iterator();
        
        while(it.hasNext()){
            
            url = it.next().getAttribute("href");
            
            System.out.println(url);
        
            if(url == null || url.isEmpty()){
System.out.println("URL is either not configured for anchor tag or it is empty");
                continue;
            }
            
            if(!url.startsWith(homePage)){
                System.out.println("URL belongs to another domain, skipping it.");
                continue;
            }
            
            try {
                huc = (HttpURLConnection)(new URL(url).openConnection());
                
                huc.setRequestMethod("HEAD");
                
                huc.connect();
                
                respCode = huc.getResponseCode();
                
                if(respCode >= 400){
                    System.out.println(url+" is a broken link");
                }
                else{
                    System.out.println(url+" is a valid link");
                }
                    
            } catch (MalformedURLException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
            } catch (IOException e) {
                // TODO Auto-generated catch block
                e.printStackTrace();
            }
        }
        
        driver.quit();

    }
}

Объяснение кода Пример

Шаг 1: Импорт пакетов

Импортируйте пакет ниже, в дополнение к пакетам по умолчанию:

import java.net.HttpURLConnection;

Используя методы этого пакета, мы можем отправлять HTTP-запросы и захватывать HTTP-коды ответов из ответа.

Шаг 2: собрать все ссылки на веб-странице

Определите все ссылки на веб-странице и сохраните их в списке.

List<WebElement> links = driver.findElements(By.tagName("a"));

Получите Iterator, чтобы пройти через Список.

Iterator<WebElement> it = links.iterator();

Шаг 3. Идентификация и проверка URL

В этой части мы проверим, принадлежит ли URL-адрес стороннему домену или пустой или пустой.

Получите href тега привязки и сохраните его в переменной url.

url = it.next().getAttribute("href");

if(url == null || url.isEmpty()){
              System.out.println("URL is either not configured for anchor tag or it is empty");
              continue;
     }

 if(!url.startsWith(homePage)){
           System.out.println("URL belongs to another domain, skipping it.");
           continue;
   }

huc = (HttpURLConnection)(new URL(url).openConnection());

huc.setRequestMethod("HEAD");

huc.connect();

respCode = huc.getResponseCode();

if(respCode >= 400){
        System.out.println(url+" is a broken link");
}
else{
        System.out.println(url+" is a valid link");
}

import org.openqa.selenium.By;		
import org.openqa.selenium.WebDriver;		
import org.openqa.selenium.chrome.ChromeDriver;		
import java.util.List;		
import java.util.concurrent.TimeUnit;		
import org.openqa.selenium.*;		

public class P1 {				
    		
    public static void main(String[] args) {									
        String baseUrl = "http://demo.guru99.com/test/newtours/";					
        System.setProperty("webdriver.chrome.driver","G:\\chromedriver.exe");					
        WebDriver driver = new ChromeDriver();					
        		
        String underConsTitle = "Under Construction: Mercury Tours";					
			driver.manage().timeouts().implicitlyWait(5, TimeUnit.SECONDS);					

			driver.get(baseUrl);					
        List<WebElement> linkElements = driver.findElements(By.tagName("a"));							
        String[] linkTexts = new String[linkElements.size()];							
			int					i = 0;					

			//extract the link texts of each link element		
			for (WebElement e : linkElements) {							
			linkTexts[i] = e.getText();							
			i++;			
        }		

			//test each link		
			for (String t : linkTexts) {							
			driver.findElement(By.linkText(t)).click();					
			if (driver.getTitle().equals(underConsTitle)) {							
                System.out.println("\"" + t + "\""								
                        + " is under construction.");			
            } else {			
                System.out.println("\"" + t + "\""								
                        + " is working.");			
            }		
			driver.navigate().back();			
        }		
			driver.quit();			
    }		
}