# Selenium (웹 테스팅 프레임워크 / Crawling)

개발/C#

# Selenium (웹 테스팅 프레임워크 / Crawling)

노마드 2021. 1. 29. 07:35

# Chrome 버전과 같은 Driver를 사용하지 않으면 Selenium을 사용할 수 없기 때문에

먼저 버전을 확인하고 버전에 맞는 Driver를 다운 받는 것이 좋다.

혹 버전과 Driver가 일치할 수도 있기 때문에 일단 실행해보고, Driver 버전 오류 발생시

드라이버를 다운 받아도 된다

# Chrome 버전과 같은 버전의 Driver를 실행파일이 있는 경로에 위치시켜야한다.

그게 아닐 경우에는 실행 파일이 있는 경로를 지정하여 드라이버 객체를 생성한다.

//IWebDriver driver = new ChromeDriver(@"C:\Users\k\Downloads\chromedriver_win32");

# Chrome 버전 확인

# Chrome 버전에 맞는 Driver 다운로드

https://chromedriver.chromium.org/downloads

# Nuget 패키지 설치

Selenium.WebDriver 하나만 설치하면 된다.

# 사용 예 - 네이버 크롤러 만들기

# 소스 코드

using OpenQA.Selenium;

using OpenQA.Selenium.Chrome;

using System;

using System.Diagnostics;

using System.Windows.Forms;

namespace WindowsFormsApp1

{

public partial class Form1 : Form

{

string result1,result2,result3,result4,result5,result6,result7,result8;

public Form1()

{

InitializeComponent();

}

private void Search_btn_Click(object sender, EventArgs e)

{

ChromeDriverService service = ChromeDriverService.CreateDefaultService();

service.HideCommandPromptWindow = true;

IWebDriver driver = new ChromeDriver(service);

driver.Url = "https://www.naver.com";

//driver.Manage().Window.Maximize(); // 최대화

driver.FindElement(By.Name("query")).SendKeys(textBox1.Text);

driver.FindElement(By.Id("search_btn")).Click();

listBox1.Items.Clear();

listBox2.Items.Clear();

try

{

listBox1.Items.Add(driver.FindElement(By.XPath("//*[@id=\"sp_blog_1\"]/dl/dt/a")).Text);

result1 = driver.FindElement(By.XPath("//*[@id=\"sp_blog_1\"]/dl/dd[3]/span/a[2]")).Text;

listBox1.Items.Add(driver.FindElement(By.XPath("//*[@id=\"sp_blog_2\"]/dl/dt/a")).Text);

result2 = driver.FindElement(By.XPath("//*[@id=\"sp_blog_2\"]/dl/dd[3]/span/a[2]")).Text;

listBox1.Items.Add(driver.FindElement(By.XPath("//*[@id=\"sp_blog_3\"]/dl/dt/a")).Text);

result3 = driver.FindElement(By.XPath("//*[@id=\"sp_blog_3\"]/dl/dd[3]/span/a[2]")).Text;

listBox1.Items.Add(driver.FindElement(By.XPath("//*[@id=\"sp_blog_4\"]/dl/dt/a")).Text);

result4 = driver.FindElement(By.XPath("//*[@id=\"sp_blog_4\"]/dl/dd[3]/span/a[2]")).Text;

}

catch { listBox1.Items.Add("블로그가 없습니다."); }

try

{

listBox2.Items.Add(driver.FindElement(By.XPath("//*[@id=\"videoItem0\"]/dl/dt/a")).Text);

result5 = driver.FindElement(By.XPath("//*[@id=\"videoItem0\"]/dl/dt/a")).GetAttribute("href");

listBox2.Items.Add(driver.FindElement(By.XPath("//*[@id=\"videoItem1\"]/dl/dt/a")).Text);

result6 = driver.FindElement(By.XPath("//*[@id=\"videoItem1\"]/dl/dt/a")).GetAttribute("href");

listBox2.Items.Add(driver.FindElement(By.XPath("//*[@id=\"videoItem2\"]/dl/dt/a")).Text);

result7 = driver.FindElement(By.XPath("//*[@id=\"videoItem2\"]/dl/dt/a")).GetAttribute("href");

listBox2.Items.Add(driver.FindElement(By.XPath("//*[@id=\"videoItem3\"]/dl/dt/a")).Text);

result8 = driver.FindElement(By.XPath("//*[@id=\"videoItem3\"]/dl/dt/a")).GetAttribute("href");

}

catch { listBox2.Items.Add("동영상이 없습니다."); }

if (driver.Manage().Window == null) driver.Close(); // 이렇게 하면 창은 남기고 드라이버만 닫을 수 있다.

}

private void SearchResult_btn_Click(object sender, EventArgs e)

{

ChromeDriverService service = ChromeDriverService.CreateDefaultService();

service.HideCommandPromptWindow = true;

IWebDriver driver = new ChromeDriver(service);

if (listBox1.SelectedItem != null && listBox2.SelectedItem == null)

{

if (listBox1.SelectedIndex.Equals(0)) driver.Url = "http://" + result1;

else if (listBox1.SelectedIndex.Equals(1)) driver.Url = "http://" + result2;

else if (listBox1.SelectedIndex.Equals(2)) driver.Url = "http://" + result3;

else if (listBox1.SelectedIndex.Equals(3)) driver.Url = "http://" + result4;

}

else if (listBox2.SelectedItem != null && listBox1.SelectedItem == null)

{

if (listBox2.SelectedIndex.Equals(0)) driver.Url = result5;

else if (listBox2.SelectedIndex.Equals(1)) driver.Url = result6;

else if (listBox2.SelectedIndex.Equals(2)) driver.Url = result7;

else if (listBox2.SelectedIndex.Equals(3)) driver.Url = result8;

}

if(driver.Manage().Window == null) driver.Close(); // 이렇게 하면 창은 남기고 드라이버만 닫을 수 있다.

}

private void BlackGroundSearch_btn_Click(object sender, EventArgs e)

{

ChromeDriverService service = ChromeDriverService.CreateDefaultService();

service.HideCommandPromptWindow = true;

ChromeOptions options = new ChromeOptions();

options.AddArguments("headless");

IWebDriver driver = new ChromeDriver(service,options);