镜头的奥秘《分镜头脚本创作》
《分镜头脚本创作》带你一起探寻镜头中的世界。...
2023-06-11
可以使用ForeSpider数据采集系统采集西瓜视频,具体操作如下所示:
l 采集网站
【场景描述】采集西瓜视频中的所有直播视频及主播信息。
【使用工具】前嗅ForeSpider数据采集系统,点击下方链接即可免费下载。
免费下载ForeSpiderwww.forenose.com/view/forespider/view/download.html
【入口网址】https://live.ixigua.com/category/1/109/
【采集内容】
采集西瓜视频中的所有直播视频及主播信息,包括主播昵称、房间号、视频地址、网站名称、直播网址、直播视频、采集时间、主播热度。
【采集效果】如下图所示:
l 思路分析
配置思路概览:
l 配置步骤
1. 新建采集任务
选择【采集配置】,点击任务列表右上方【+】号可新建采集任务,将采集入口地址填写在【采集地址】框中,【任务名称】自定义即可,点击下一步。
选择普通翻页,点击完成按钮,即创建任务完成。
2. 直播分类链接获取
①在浏览器中点击不同分类的直播,将对应链接复制出来,观察链接规律。
发现不同分类直播的链接规律为:
https://live.ixigua.com/category/1/分类id/
②点击页面右键【查看源文件】,在源码中查找分类id,发现分类id在源码的js中。
将该段源码复制进行js格式化在线转化,可更加清楚的看到结构。如下图所示能够看出,我们需要的分类名称和id是在【sideBarData】数组的第三个对象中的【childs】数组中。
③打开脚本窗口,新建脚本。
根据刚才发现的规律,用脚本来拼分类链接,编写好后点击右上角保存。
具体如下所示:
④采集预览,复制任意一条分类链接,在浏览器中打开,看是否为该页内容。
3.各主播直播链接
①新建模板02,在模板02下建一个链接抽取,具体操作如下图所示。
②在浏览器上打开任意一个分类,复制价格主播直播链接,观察其规律,具体如下:
③不难发现主播直播规律为: https://live.ixigua.com/主播id/
④点击F12,查看请求,发现主播id在下图所示请求中https://live.ixigua.com/api/feed/category/1/74?_signature=iYkdqAAgEB7evlXzywm4yYmJHbAAOmK
(测试发现链接后半部分不加也可以打开该请求,故脚本中省略后半部分)
请求地址规律为:https://live.ixigua.com/api/feed/category/1/分类id
⑤根据刚才发现的规律,用脚本来拼分类请求链接,获取到请求中的源码,从而拼出主播页面链接。
具体如下所示:
⑥保存脚本后,点击右上角【采集预览】按钮,双击任意一条链接,进入下一层,复制任意一条主播链接,在浏览器打开,看是否成功抽取主播链接。
3.抽取主播数据
①新建一个抽取模板,在其下新建一个数据抽取,具体操作如下所示:
②数据建表
点击图中加号,新建一个数据表,然后添加字段,各字段属性如下图所示:
③将新建好的数据表,关联到模板中去,如下图所示:
④字段抽取
字段抽取使用脚本抽取的方法,在数据抽取模板中新建一个脚本窗口。
⑤采集预览,复制一条翻页的链接,在浏览器中打开。
⑥鼠标单击右键,查看源文件,观察可发现直播视频链接在如下图所示位置。
将以上一段js格式化后,观察其位置,为【roomData】节点下的【playInfo】数组的第一个数组对象的FlvUrl。且本视频链接部分为unicode编码,需要转码一下。
⑦根据以上观察,编写数据抽取脚本,具体如下图所示:
⑧采集预览
点击右上角采集预览,如下图所示:
l 采集步骤
模板配置完成,采集预览没有问题后,可以进行数据采集。
①首先要建立采集数据表:
选择【数据建表】,点击【表单列表】中该模板的表单,在【关联数据表】中选择【创建】,表名称自定义,这里命名为【xigua】(注意命名不能用数字和特殊符号),点击【确定】。创建完成,勾选数据表,并点击右上角保存按钮。
②高级设置,在高级配置中,设置采集视频的最大限制,如下图所示,这样爬虫采集15M就会停止采集,否则爬虫将一直采集一个直播视频直到直播结束。设置好后,点击右上角保存按钮。
③选择【数据采集】,勾选任务名称,点击【开始采集】,则正式开始采集。
③可以在【数据浏览】中,选择数据表查看采集数据,并可以导出数据。
④导出的文件打开如下图所示:
⑤导出视频步骤如下图所示:
l 前嗅简介
前嗅大数据,国内领先的研发型大数据专家,多年来致力于为大数据技术的研究与开发,自主研发了一整套从数据采集、分析、处理、管理到应用、营销的大数据产品。前嗅致力于打造国内第一家深度大数据平台!
当然支持了。
更多可能是浏览器的插件问题。
最新的插件装上 。
或者换其他内核的;浏览器。
比如 火狐或者谷歌浏览器的,
2020多省联考,截止目前山东、陕西、天津、浙江、湖南、福州等省份笔试已结束,大部分考生都在等笔试成绩,不过也有不少考生已经开始着手准备面试了。
面试作为公务员考试中的一个重要环节,起着至关重要的作用,而且公务员面试与笔试不同,整个过程中存在不确定的因素较多,任何一个很小的细节都有导致全盘皆输的可能。
但对于很多第一次参加公务员考生的同学来说,面试考什么内容?需要注意哪些问题?都不是特别清楚,今天图图就详细说一说关于公务员面试的事情,希望对大家有所帮助。
公务员面试考什么公务员面试有若干测评要素,其中包括综合能力分析、专业知识、表达能力、应急应变能力、自我控制能力、情绪稳定性以及工作态度、计划组织协调能力等。可以说公务员面试所考察的内容全面又细致。
公务员面试的特点① 特定的环境
公务员面试的考场对于考生来说是一个封闭又陌生的屋子,里面坐着一排考官,大概有9-11个左右,所有考官都会盯着面试者。
② 特定的时间
面试时间也是特定的,每个考生从“考试开始”的信号发出,一共有10分钟的作答时间,需要回答的问题有三四道题,这10分钟也包含考官读题的时间。
③ 不特定的答案
公务员面试不特定的就是答案,所有题的答案都不是唯一的,只要考生的观点明确,逻辑清晰,论证充分,而且能围绕观点自圆其说,能说服考官就行。
公务员面试注意事项了解了面试的特点以及考试内容,接下来就要针对这些问题做好准备:
① 着装
男生以深色西装、白色或蓝色的衬衣为主,切忌大红大紫或粉色衬衣;另外领带最好也是深色系,并注意皮鞋和袜子要与西装搭配;
女生的穿着相比男生可以选更多颜色,但仍要以黑色为主,适当可选藏青色、米色、白色、驼色外套。现在夏天可以穿套裙,再适当画个淡妆,看起来更精神些。
② 答题时间
面试每道题的答题时间大概是2-3分钟,因此平时备考训练中,一定要对两分钟或三分钟有个整体的感觉。
③ 眼神交流
公务员面试是一个交流的过程,考生需要传递给考官对此次面试的重视、热情、自信,因此,在作答过程中,考生要注意与考官的眼神交流,如果确实紧张,可以看着考官的面部即可,但抬头作答是必须的。
以上就是关于公务员面试的一些情况,希望能对大家有所帮助,若还有哪些不懂的地方,可以留言哦~
以上内容就是为大家推荐的手机yy怎么录制视频(怎么从西瓜视频上下载一些经典小视频并去除水印)最佳回答,如果还想搜索其他问题,请收藏本网站或点击搜索更多问题
内容来源于网络仅供参考版权声明:所有来源标注为小樱知识网www.xiaoyin02.com的内容版权均为本站所有,若您需要引用、转载,只需要注明来源及原文链接即可。
本文标题:手机yy怎么录制视频(怎么从西瓜视频上下载一些经典小视频并去除水印)
本文地址:https://www.xiaoyin02.com/smjd/906028.html
相关文章
热点文章
2021年独生子女补贴新政策是真的吗(独生子女证有有效期吗)
2021年国庆节阅兵仪式几点开始几点结束(2021年国庆节还有阅兵吗)
鼠目寸光一点红是什么生肖动物(鼠目寸光一点红)指什么生肖,紧密
k0到k9的玩法大全(强制gc的玩法和注意事项)
入土为安是什么生肖《入土为安》打一个生肖动物,词语解释
浙江12月底全面停工是真的吗(浙江什么时候放假停工)
如何做t(t怎么把p做哭)
北京口碑最差的三甲医院(北京301医院最擅长什么)