# JSFinder

**Repository Path**: p4sschen/JSFinder

## Basic Information

- **Project Name**: JSFinder
- **Description**: JSFinder is a tool for quickly extracting URLs and subdomains from JS files on a website.
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 1
- **Created**: 2020-03-16
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# JSFinder
JSFinder is a tool for quickly extracting URLs and subdomains from JS files on a website.

JSFinder是一款用作快速在网站的js文件中提取URL，子域名的工具。

提取URL的正则部分使用的是[LinkFinder](https://github.com/GerbenJavado/LinkFinder) 

Blog: https://threezh1.github.io/

## 用法

- **简单爬取**

`python JSFinder.py -u http://www.mi.com`

这个命令会爬取 http://www.mi.com 这单个页面的所有的js链接，并在其中发现url和子域名

返回示例：

```
url:http://www.mi.com                                         
Find 50 URL:                                                  
http://api-order.test.mi.com                                  
http://api.order.mi.com                                       
http://userid.xiaomi.com/userId                               
http://order.mi.com/site/login?redirectUrl=                                                   
...已省略                            
                                                              
Find 26 Subdomain:                                            
api-order.test.mi.com                                         
api.order.mi.com                                              
userid.xiaomi.com                                             
order.mi.com                                                                                              
...已省略

```

- **深度爬取**

`python JSFinder.py -u http://www.mi.com -d`

深入一层页面爬取JS，时间会消耗的更长。

建议使用-ou 和 -os来指定保存URL和子域名的文件名。 例如：

`python JSFinder.py -u http://www.mi.com -d -ou mi_url.txt -os mi_subdomain.txt`

- **批量指定URL/指定JS**

指定URL：

`python JSFinder.py -f text.txt`

指定JS：

`python JSFinder.py -f text.txt -j`

可以用brupsuite爬取网站后提取出URL或者JS链接，保存到txt文件中，一行一个。

指定URL或JS就不需要加深度爬取，单个页面即可。

- **其他**

-ou 指定文件名保存URL链接 例：

`python JSFinder.py -u http://www.mi.com -ou mi_url.txt`

-os 指定文件名保存子域名 例：

`python JSFinder.py -u http://www.mi.com -os mi_subdomain.txt`

- **注意**

url 不用加引号

url 需要http:// 或 https://

指定JS文件爬取时，返回的URL为相对URL

指定URL文件爬取时，返回的相对URL都会以指定的第一个链接的域名作为其域名来转化为绝对URL。

- **截图**

实测简单爬取：

![jietu_01.jpg](https://i.loli.net/2019/06/10/5cfe47d6d811a49833.jpg)

![jietu_02.jpg](https://i.loli.net/2019/06/10/5cfe47d6c13a896578.jpg)

实测深度爬取：

![01.jpg](https://i.loli.net/2019/06/10/5cfe4e4f0fc5f12808.jpg)

![02.jpg](https://i.loli.net/2019/06/10/5cfe4e4ee6a0073690.jpg)

	http://www.oppo.com
	URL:4426 个
	子域名：24 个

	http://www.mi.com
	URL:1043 个
	子域名：111 个

	http://www.jd.com
	URL:3627 个
	子域名：306 个