吾爱破解 - LCG - LSG |安卓破解|病毒分析|www.52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

搜索
查看: 2073|回复: 20
收起左侧

[Python] 【Python】查询工信部网站备案信息详情

[复制链接]
【恒】 发表于 2021-5-31 18:41
本帖最后由 【恒】 于 2021-7-27 16:40 编辑

ICP-Checker

7月27日

  • 修改了一处缺少错误提示导致程序退出的BUG(只有遇到IP被封禁的时候才会触发)。
  • 使用pyinstaller打包exe,方便没有环境的朋友运行,发布在 https://github.com/wongzeon/ICP-Checker/releases/

一个简单的Python程序,用于查询网站或企业的ICP备案信息

适用于2021年新版的工信部ICP/IP地址/域名信息备案管理系统

项目主页:https://github.com/wongzeon/ICP-Checker

初衷

工作时常需要查询网站的备案信息,总是要打开浏览器、点击书签、完成滑动验证等重复操作,感觉十分浪费时间

原本某工具还是挺方便查询的,结果现在要开通VIP才能查看信息了,实在太坑!

还有就是对Python有兴趣,为了练练手,于是编写了该查询程序。



61e8a333gy1gqjfsan5qvj20xg0760sv.jpg

特性

✅ 通过 https://beian.miit.gov.cn/ 查询信息,确保与管局实际信息一致;

✅ 支持自动完成图片拖动验证,存在极低的失败率

✅ 支持循环翻页查询,获取企业名下的所有备案信息

✅ 查询完毕后按任意键继续查询

代码

# -*- coding: utf-8 -*-
import requests,hashlib,time,base64,cv2,os
while True:
    #提前获取要查询的对象信息,以免Token失效(Token有效时间为3分钟)
    print("项目地址:https://github.com/wongzeon/ICP-Checker\n")
    print("版本:V1.1 可用测试:2021-7-27\n")
    print("以企业名称查询的,需要输入企业全称\n")
    print("以域名查询的,请不要输入“http/www”等域名外的字符\n")
    info = input("请输入要查询的备案信息,可以为公司名或域名:")
    info_data = {
        'pageNum':'',
        'pageSize':'',
        'unitName':info
    }
    #构造AuthKey
    timeStamp = int(round(time.time()*1000))
    authSecret = 'testtest' + str(timeStamp)
    authKey = hashlib.md5(authSecret.encode(encoding='UTF-8')).hexdigest()
    #获取Cookie
    cookie_headers = {
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    'accept-encoding': 'gzip, deflate, br',
    'accept-language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.72 Safari/537.36 Edg/90.0.818.42'
    }
    cookie = requests.utils.dict_from_cookiejar(requests.get('https://beian.miit.gov.cn/',headers=cookie_headers).cookies)['__jsluid_s']
    #请求获取Token
    t_url = 'https://hlwicpfwc.miit.gov.cn/icpproject_query/api/auth'
    t_headers = {
        'Host': 'hlwicpfwc.miit.gov.cn',
        'Connection': 'keep-alive',
        'sec-ch-ua': '" Not A;Brand";v="99", "Chromium";v="90", "Microsoft Edge";v="90"',
        'Accept': '*/*',
        'DNT': '1',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.85 Safari/537.36 Edg/90.0.818.46',
        'Origin': 'https://beian.miit.gov.cn',
        'Sec-Fetch-Site': 'same-site',
        'Sec-Fetch-Mode': 'cors',
        'Sec-Fetch-Dest': 'empty',
        'Referer': 'https://beian.miit.gov.cn/',
        'Accept-Encoding': 'gzip, deflate, br',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
        'Cookie': '__jsluid_s=' + cookie
    }
    data = {
        'authKey': authKey,
        'timeStamp': timeStamp
    }
    t_response = requests.post(t_url,data=data,headers=t_headers)
    try:
        get_token = t_response.json()['params']['bussiness']
    except:
        print('\n'"请求被禁止,请稍后或更换头部与IP后再试,状态码:",t_response.status_code)
        break
    #获取验证图像、UUID
    p_url = 'https://hlwicpfwc.miit.gov.cn/icpproject_query/api/image/getCheckImage'
    p_headers = {
        'Host': 'hlwicpfwc.miit.gov.cn',
        'Connection': 'keep-alive',
        'Content-Length': '0',
        'sec-ch-ua': '" Not A;Brand";v="99", "Chromium";v="90", "Microsoft Edge";v="90"',
        'Accept': 'application/json, text/plain, */*',
        'DNT': '1',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.85 Safari/537.36 Edg/90.0.818.46',
        'token': get_token,
        'Origin': 'https://beian.miit.gov.cn',
        'Sec-Fetch-Site': 'same-site',
        'Sec-Fetch-Mode': 'cors',
        'Sec-Fetch-Dest': 'empty',
        'Referer': 'https://beian.miit.gov.cn/',
        'Accept-Encoding': 'gzip, deflate, br',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
        'Cookie': '__jsluid_s=' + cookie
    }
    p_request = requests.post(p_url,data='',headers=p_headers)
    try:
        p_uuid = p_request.json()['params']['uuid']
        big_image = p_request.json()['params']['bigImage']
        small_image = p_request.json()['params']['smallImage']
    except KeyError:
        print("请重试,请求状态码:",p_request.status_code)
    #解码图片,写入并计算图片缺口位置
    with open('bigImage.jpg','wb') as f:
        f.write(base64.b64decode(big_image))
        f.close()
    with open('smallImage.jpg','wb') as f:
        f.write(base64.b64decode(small_image))
        f.close()
    background_image = cv2.imread('bigImage.jpg',cv2.COLOR_GRAY2RGB)
    fill_image = cv2.imread('smallImage.jpg',cv2.COLOR_GRAY2RGB)
    background_image_canny = cv2.Canny(background_image, 100, 200)
    fill_image_canny = cv2.Canny(fill_image, 100, 300)
    position_match = cv2.matchTemplate(background_image, fill_image, cv2.TM_CCOEFF_NORMED)
    min_val,max_val,min_loc,max_loc = cv2.minMaxLoc(position_match)
    position = max_loc
    mouse_length = position[0]+1
    os.remove('bigImage.jpg')
    os.remove('smallImage.jpg')
    #通过拼图验证,获取sign
    check_url = 'https://hlwicpfwc.miit.gov.cn/icpproject_query/api/image/checkImage'
    check_headers = {
        'Host': 'hlwicpfwc.miit.gov.cn',
        'Accept': 'application/json, text/plain, */*',
        'Connection': 'keep-alive',
        'Content-Length': '60',
        'sec-ch-ua': '" Not A;Brand";v="99", "Chromium";v="90", "Microsoft Edge";v="90"',
        'DNT': '1',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.72 Safari/537.36 Edg/90.0.818.42',
        'token': get_token,
        'Content-Type': 'application/json',
        'Origin': 'https://beian.miit.gov.cn',
        'Sec-Fetch-Site': 'same-site',
        'Sec-Fetch-Mode': 'cors',
        'Sec-Fetch-Dest': 'empty',
        'Referer': 'https://beian.miit.gov.cn/',
        'Accept-Encoding': 'gzip, deflate, br',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
        'Cookie': '__jsluid_s=' + cookie
    }
    check_data = {
        'key':p_uuid,
        'value':mouse_length
    }
    check_request = requests.post(check_url,json=check_data,headers=check_headers)
    try:
        sign = check_request.json()['params']
    except Exception:
        print('\n'"请求被禁止,请稍后或更换头部与IP后再试,状态码:",check_request.status_code)
        break
    #获取备案信息
    info_url = 'https://hlwicpfwc.miit.gov.cn/icpproject_query/api/icpAbbreviateInfo/queryByCondition'
    info_headers = {
        'Host': 'hlwicpfwc.miit.gov.cn',
        'Connection': 'keep-alive',
        'Content-Length': '78',
        'sec-ch-ua': '" Not A;Brand";v="99", "Chromium";v="90", "Microsoft Edge";v="90"',
        'DNT': '1',
        'sec-ch-ua-mobile': '?0',
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.72 Safari/537.36 Edg/90.0.818.42',
        'Content-Type': 'application/json',
        'Accept': 'application/json, text/plain, */*',
        'uuid': p_uuid,
        'token': get_token,
        'sign': sign,
        'Origin': 'https://beian.miit.gov.cn',
        'Sec-Fetch-Site': 'same-site',
        'Sec-Fetch-Mode': 'cors',
        'Sec-Fetch-Dest': 'empty',
        'Referer': 'https://beian.miit.gov.cn/',
        'Accept-Encoding': 'gzip, deflate, br',
        'Accept-Language': 'zh-CN,zh;q=0.9,en;q=0.8,en-GB;q=0.7,en-US;q=0.6',
        'Cookie': '__jsluid_s=' + cookie
    }
    info_request = requests.post(info_url,json=info_data,headers=info_headers)
    domain_total = info_request.json()['params']['total']
    page_total = info_request.json()['params']['lastPage']
    page_size = info_request.json()['params']['pageSize']
    start_row = info_request.json()['params']['startRow']
    end_row = info_request.json()['params']['endRow']
    os.system('cls')
    print("\n查询对象",info,"共有",domain_total,"个备案域名",'\n')
    print("域名具体信息如下:")
    for i in range(1,page_total+1):
        for k in range(start_row,end_row+1):
            info_base = info_request.json()['params']['list'][k]
            domain_name = info_base['domain']
            domain_type = info_base['natureName']
            domain_licence = info_base['mainLicence']
            domain_web_licence = info_base['serviceLicence']
            domain_site_name = info_base['serviceName']
            domain_status = info_base['limitAccess']
            domain_approve_date = info_base['updateRecordTime']
            domain_owner = info_base['unitName']
            try:
                domain_content_approved = info_base['contentTypeName']
                if not bool(domain_content_approved):
                    domain_content_approved = "无"
            except KeyError:
                domain_content_approved = "无"
            print("\n域名主办方:",domain_owner,'\n')
            print("域名:",domain_name,'\n')
            print("网站名称:",domain_site_name,'\n')
            print("备案许可证号:",domain_licence,'\n')
            print("网站备案号:",domain_web_licence,'\n')
            print("域名类型:",domain_type,'\n')
            print("网站前置审批项:",domain_content_approved,'\n')
            print("是否限制接入:",domain_status,'\n')
            print("审核通过日期:",domain_approve_date,'\n')
        info_data_page = {
            'pageNum':i+1,
            'pageSize':'10',
            'unitName':info
        }
        if info_data_page['pageNum'] > page_total:
            print("查询完毕",'\n')
            break
        else:
            info_request = requests.post(info_url,json=info_data_page,headers=info_headers)
            start_row = info_request.json()['params']['startRow']
            end_row = info_request.json()['params']['endRow']
            time.sleep(3)
    os.system('pause')

说明

⚠ 项目仅用于学习交流,不可用于商业用途

💡 访问的是官方数据,请合理使用,快速、大量的请求会被拉黑屏蔽。

依赖

Python 版本 >= 3.6

pip install opencv_python

pip install requests

实际测试

最新可用测试时间:2021年7月17日



61e8a333gy1gqjg0q201aj20oy0c6dfw.jpg

61e8a333gy1gqjfv90ti8j20oc0cz0st.jpg

效果.png

61e8a333gy1gqjgtbrt35j20dw05agm8.jpg

免费评分

参与人数 9吾爱币 +13 热心值 +7 收起 理由
莱因哈特烦恼 + 1 我很赞同!
52pj_wyh + 1 谢谢@Thanks!
wu-ai-po-jie + 1 我很赞同!
苏紫方璇 + 7 + 1 欢迎分析讨论交流,吾爱破解论坛有你更精彩!
xyz232310 + 1 + 1 感谢发布原创作品,吾爱破解论坛因你更精彩!
kk1212 + 1 + 1 谢谢@Thanks!
ma4907758 + 1 谢谢@Thanks!
gunxsword + 1 + 1 谢谢@Thanks!
哒劳德 + 1 + 1 我很赞同!

查看全部评分

本帖被以下淘专辑推荐:

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

 楼主| 【恒】 发表于 2021-5-31 23:26
江南小公子 发表于 2021-5-31 20:59
滑动验证怎么弄的,可以详细说说吗

计算缺口位置,把缺口位置返回过去就可以了。它那个和其他的滑动验证不同
 楼主| 【恒】 发表于 2021-5-31 23:23

不是,只是ICP备案的,是域名的备案情况,如果要查企业诚信的话,应该查企业信息那个网站,不过有点复杂
哒劳德 发表于 2021-5-31 18:46
 楼主| 【恒】 发表于 2021-5-31 18:49
哒劳德 发表于 2021-5-31 18:46
非常详细的东西,感谢分享

希望能用得上~
keyyan 发表于 2021-5-31 19:43
谦虚了大佬
 楼主| 【恒】 发表于 2021-5-31 19:49

真的刚入门,大佬说不上 😂

江南小公子 发表于 2021-5-31 20:59
滑动验证怎么弄的,可以详细说说吗
pengtusheng 发表于 2021-5-31 21:09
感谢分享            
8204118 发表于 2021-5-31 21:20
查黑心企业?
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则 警告:本版块禁止灌水或回复与主题无关内容,违者重罚!

快速回复 收藏帖子 返回列表 搜索

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2021-7-28 03:15

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表