抢学术章的的辛酸泪
前言
2021-10-10更新,增加对人工认证的处理,重构代码
由于问卷星更新了,里面加了阿里云智能验证的接口,所以之前的方法使用 selnium 不行了。
前端通过简单的判断就可以知道是不是 webdriver,解决的办法可以使用中间代理过滤掉 webdrvier 中的指纹信息,太过繁琐且不太好移植
😄 因此使用puppeteer的V2.0来了!
项目地址: https://github.com/DongZhouGu/wjx-academic
使用说明新建python工程建议使用 IDE Pycharm , 工程目录如下
安装环境Requirements
Python 3.5+
time
pyyaml
pypuppter(https://github.com/miyakogi/pyppeteer)
1python3 -m pip install pyppeteer -i https://pypi.tuna.tsinghua.edu.cn/simple
也可以直接在 Pycharm 中安装此包
安装包完成后,接着,修改下图所示的
的 pyppeteer/_init_.py ...
实验室gpu管理
🙂在线阅读地址:项目地址:https://github.com/DongZhouGu/shu-lxd-gpu
🙂在线阅读地址:https://dongzhougu.github.io/shu-lxd-gpu/
GPU 容器使用说明
容器目前只在新到的服务器上(2* 2080Ti)实施
但可以访问 👉显卡监控界面 看到实验室所有显卡的使用情况
使用LXD创建和管理容器,多位同学可以同时使用校园网远程访问服务器;
操作简单,你可以像是用自己的电脑一样使用容器。
请根据角色,阅读以下具体的使用文档👉For 用户👉For 管理员👉显卡监控界面
监控界面的登入用户名与密码,见下方文档
https://shimo.im/docs/yVpDgvJKqPwtvpqr
document.querySelectorAll('.github-emoji')
.forEach(el => {
if (!el.dataset.src) { return; }
const img = document.crea ...
机器学习算法实现
机器学习算法实现
😄 本仓库是《scikit-learn 机器学习 常用算法及编程实战》的学习笔记,使用sklearn实现常用的机器学习算法,附有代码、文档以及相关数据集。项目地址: https://github.com/DongZhouGu/scikit-learn-ml
😄也可以到我的网站上阅读
K-近邻算法
线性回归算法
逻辑回归算法
决策树算法
支持向量机SVM
朴素贝叶斯算法
PCA算法
K-均值算法
scikit-learn是一个开源的Python语言机器学习工具包。它涵盖了几乎所有主流机器学习算法的实现,并且提供了一致的调用接口。它基于Numpy和SciPy等Python数值计算库,提供了高效的算法实现。总结起来,scikit-learn工具包有以下几个优点:
文档齐全:官方文档齐全,更新及时。
接口易用:针对所有的算法提供了一致的接口调用规则,不管是KNN、K-Means还是PCA。
算法全面:涵盖主流机器学习任务的算法,包括回归算法、分类算法、聚类分析、数据降维处理等。
当然,scikit-learn不支持分布式计算,不适合用来处理超大型数据,但这并不影响 ...