爬虫软件是现今互联网环境下,高效准确地获取数据的重要方式之一。针对传统的初级爬虫技术易于被目标网站拦截访问的问题,简述爬虫的工作原理和方式,讨论爬虫、反爬虫与反反爬虫之间的相互关系。分析应对目标网站的反反爬虫机制,包括伪装用户代理,设置IP地址代理、使用自动化测试工具调用浏览器等技术要点,并分析了基于Python ...
/dl/208713.html
上传时间： 2021-12-10
上传用户：erikovskywu
对于shap文件,包含很多的地理信息,但是在实际工作学习中,并非所有信息都能被利用。利用python脚本语言,可以单独获取所需要的特定shapefile文件属性信息,点位坐标信息,并且转换为必要投影系统下的坐标。本文借助python脚本处理shapefile文件,利用某地区人口密度分布图,生成等值区域图,实现python与shapefile的实践结合,为更 ...
/dl/208880.html
上传时间： 2021-12-25
上传用户：SHH3332013
引入拓扑自适应动态轮廓(T-Snake)模型并进行了改进,设计了合适的能量函数,提出了目标内部岛状空洞引起的拓扑冲突的检测与处理机制,实现了包含河中岛的复杂河流边界的精确提取。针对模型初始轮廓需手动构造的缺点,利用影像分形维数最小值获取水体内部区域并实现轮廓自动初始化。试验表明,该方法可有效提取水体深凹边界和含河 ...
/dl/209074.html
标签： 复杂 水体 边界 提取 改进 模型 snake(T-Snake)模型 河中岛 初始轮廓 分形维数 边界提取
上传时间： 2022-01-12
上传用户：二驱蚊器
传统的一阶马尔科夫随机场在图像先验信息表达和对图像整体的约束上能力有限,同时基于暗通道的去雾算法在天空等大片白色区域处理效果存在偏差。针对以上问题,该文提出一种基于Color Lines的高阶马尔科夫随机场去雾算法。该算法通过引入对颜色失真具有很好鲁棒性的Color Lines先验条件,初步校正经暗通道获取的传输图,然后利用 ...
/dl/209137.html
标签： color lines 先验 随机 高阶马尔科夫随机场 Color Lines
上传时间： 2022-01-18
上传用户：duqian199418
为了从社交媒体中获取用户反映手机产品缺陷的数据信息,在对现有社交媒体分析框架进行改进的基础上,结合不同的平台特征,构建了基于社交媒体分析的手机产品缺陷识别框架;在综合分析比较后采用信息增益作为特征评估函数,利用支持向量机分类方法对社交媒体数据进行情感识别,构建手机产品缺陷语料集;基于主题模型算法对手机产品 ...
/dl/209244.html
标签： 社交 媒体 分析 手机 缺陷 识别别 文本挖掘 手机
上传时间： 2022-01-28
上传用户：huang_spring
理论研究表明中子俘获截面测井仪记录热中子计数的相对变化，在测量阶段热中子呈指数规律衰减，这种衰减反映了热中子的俘获过程，并与地层的岩石骨架和孔隙流体具有良好的相关性，适用于裸眼井、套管井或过油管测井。 中子俘获截面测井原理是用小型中子管重复发射高能脉冲中子照射井剖面，每次发射中子后在井眼 ...
/dl/209402.html
上传时间： 2022-02-12
上传用户：sonnoy
UART接口主要负责与主芯片进行实时通信并获取主芯片的实时工作状态信息；SPI接口主要负责与CPU进行通信，从而获得RC7222工作的实时状态，从而完成通过网管板对设备进行实时管理。
/dl/209514.html
标签： CWDM
上传时间： 2022-02-23
上传用户：tingshuo
链式打蛋机是用来自动把鸡蛋打开并且将蛋清、蛋黄以及蛋壳分离的机器，但如果有接近散黄或已经散黄的不新鲜鸡蛋，打开的鸡蛋蛋黄膜破裂蛋黄会漏入蛋清中，影响蛋清液的品质。为此，国内蛋品深加工企业在使用进口链式打蛋机时，都要安排工人站在打蛋机蛋清蛋黄分离工段，发现有散黄蛋时，必须手动将散黄蛋剔除。计算机视觉技 ...
/dl/209519.html
上传时间： 2022-02-24
上传用户：二虎125
将 CRT 显示器和侦收系统组视为一个通信系统， 建立了不同显示内容时的两种信源模型和与之对应的信宿模型．结合信源墒损失率和信宿墒获取率的概念， 讨论了此通信系统的保熵性......
/dl/209902.html
上传时间： 2022-04-03
上传用户：innocence713
网络数据形式的多样性与复杂程度都对数据获取造成了很大的影响,常用的网络爬虫已经无法适用于精准的数据查找、获取与分析,而Python语言简单并提供了多线程分布式爬虫框架,使网络爬虫的实现不再那么复杂.可配置网络爬虫通过Python 2.7和Mysql来实现一个多线程爬虫程序,可实现数据抓取并放入数据库功能,只要数量不多的代码就 ...
/dl/210073.html
上传时间： 2022-08-31
上传用户：zcx001
