声明:
本文章中所有内容仅供学习交流使用,不用于其他任何目的,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关!
有相关问题请第一时间头像私信联系我删除博客!

前言

记录一下关键步骤,实在vmware的基础上弄的,子系统由于电脑空间不够所以在此不采用这种做法,建议有条件弄子系统我是为了测试一下linux运行效果记录一下中间踩的坑。

过程

安装python

#改成自己需要的版本

wget https://www.python.org/ftp/python/3.8.0/Python-3.8.0.tgz

tar -zxvf python3.8.0

修改默认版本

mv /usr/bin/python3 /usr/bin/python

rm -rf /usr/bin/python

#重新链接  

sudo ln -s /Python-3.10.0/python /usr/bin/python

查看版本

python --version

设置源

pip config set global.index-url https://mirrors.tuna.tsinghua.edu.cn/pypi/web/simple

ssl报错

sudo apt-get update

sudo apt-get install openssl

sudo apt-get install libssl-dev

vim Modules/Setup

OPENSSL=/usr/local/ssl
_ssl _ssl.c \
     -I$(OPENSSL)/include -L$(OPENSSL)/lib \
     -lssl -lcrypto

创建venv

python venv -m venv

测试是否安装ssl成功

pip install requests

pip install curl_cffi

pip install tls-client

报错问题

ModuleNotFoundError: No module named '_ctypes'

安装

sudo apt-get install libffi-dev

进入python安装目录重新编译

make

部署node和python爬虫环境

上传整个目录

./node js文件 开启服务

python  py文件

结果

部署akamai结果如图

总结

 1.出于安全考虑,本章未提供完整流程,调试环节省略较多,只提供大致思路,具体细节要你自己还原,相信你也能调试出来。

更多推荐