背景

新到一个需求需要用爬虫采集数据，但这个采购的系统登录做了加密，我也懒得研究前端代码了，于是考虑用selenium来获取用户token做处理。

下载webdriver

由于我开发机器使用的chorme，因此下载的chorme webdriver，地址如下：
webdriver
有一个坑爹的地方在于chorme会自动更新，而webdriver的版本必须跟chorme的版本匹配，因此生产环境我是安装的Chromium，它就不会自动更新了哈哈哈哈。

代码

package com.spider;import com.alibaba.fastjson.JSONObject;
import lombok.extern.slf4j.Slf4j;
import org.openqa.selenium.By;
import org.openqa.selenium.JavascriptExecutor;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.chrome.ChromeDriver;
import org.openqa.selenium.chrome.ChromeOptions;
import org.springframework.stereotype.Component;import java.io.IOException;
import java.net.URISyntaxException;public class SyncDataTask {public String getAuthToken() throws InterruptedException, URISyntaxException, IOException {//注意这里替换成你对应的地址 比如我的是/Users/xxxx/lib/chromedriverSystem.getProperties().setProperty("webdriver.chrome.driver", "替换成webdriver地址");ChromeOptions options = new ChromeOptions();options.addArguments("--disable-blink-features=AutomationControlled");//1、1解决403错误options.addArguments("--remote-allow-origins=*");//3、关闭左上方Chrome 正受到自动测试软件的控制的提示options.setExperimentalOption("useAutomationExtension", false);// 1.创建webdriver驱动WebDriver driver = new ChromeDriver(options);// 2.打开首页driver.get("https://xxxxx.com");Thread.sleep(1000);//输入账号密码driver.findElement(By.className("user-name")).sendKeys("account");driver.findElements(By.className("ant-input-lg")).get(1).sendKeys("password");//点击登录driver.findElement(By.className("login-refactoring-btn")).click();Thread.sleep(5000L);String token = getItemFromLocalStorage("token", driver);log.info("token:{}", token);driver.quit();return JSONObject.parseObject(token).getString("access_token");}public static String getItemFromLocalStorage(String key, WebDriver driver) {JavascriptExecutor js = ((JavascriptExecutor) driver);return (String) js.executeScript(String.format("return window.localStorage.getItem('%s');", key));}
}