a5.gif

keoki

GF  2021-02-25 22:38
(一些脚本:https://bbs.imoutolove.me/read.php?tid=1353704)

分享一个爬虫吧,可爬2048,cunhua,laowang,moxing论坛最新帖子

主要目的是省去了每次上这几个论坛找资源的时间,可以一键知道最新的资源贴里有没有你想要的。

可以根据关键词,发帖作者名,筛选出最新发布的帖子里符合对应条件的帖子,把结果写入对应的html文件,显示效果类似论坛的图片模式,可直接点击链接进入帖子页面,参考下图。

可设置需要爬取的对应版块号,爬取页数,和需要排除的关键字,我把我的配置贴在下图以供参考。

爬取的结果会缓存到本地,每次爬取会对比缓存,筛选出之前爬取中没出现过的帖子放在html文件的最前面。







需要python3.8或以上

分别运行:

复制代码
  1. python daily_updates.py cunhua
  2. python daily_updates.py moxing
  3. python daily_updates.py laowang
  4. python daily_updates.py 2048
附件: southplus.zip (29 K) 下载次数:489

0.gif

绿母恋母重口sm变态

B1F  2021-02-25 22:42
(在下只是一个变态而已)
mark一手

123


不灭魔躯


食我大雕


none.gif

acbd

B5F  2021-02-25 23:05
(学习,爽!)
强啊

BeABetterMan


3ffa0134

B7F  2021-02-25 23:11
    

a6.gif

云倦舒


none.gif

瓜子123

真就科技改变生活

a4.gif

潇潇雨落

mark

辣辣kk


762786.png

焰尾

B12F  2021-02-26 10:24
(您还没有设置个性签名)
有内置cookie吗?    关键是没号

790299.jpg

Zeno

B13F  2021-02-26 10:39
(世间的很多事物,追求时候的兴致总要比享用时候的兴致浓烈。)
mark

璀璨君


e86c73fc


none.gif

6bcf7433

又下不了,没爬的必有,吊胃口

none.gif

S.Patrick

进来学代码

1078562.jpg

未半

叔叔我啊。

已经下不动了

十几tb的硬盘几天就下满了

看都没看过

要这永久会员有啥用

44tq5v.jpg

WDNMD

B19F  2021-02-27 02:59
(出售链接都炸了;抄底偷拍交换私信qq号)
大佬牛逼 开了个打赏贴
https://bbs.level-plus.net/read.php?tid=1109067

1115338.png

CC先生

B20F  2021-02-27 03:38
(除了死亡,都是擦伤)

回 9楼(瓜子123) 的帖子

是科技改变XING生活

cd6ed368


冯唐金线


多木知春


sins7


a9.gif

可念不可说

不会用hhh慢慢学

none.gif

qizihai

B26F  2021-02-27 13:13
(隔江犹唱后庭花)
引用
引用楼主3f341886于2021-02-25 22:38发表的 分享一个爬虫吧,可爬2048,cunhua,laowang,moxing论坛最新帖子 :
主要目的是省去了每次上这几个论坛找资源的时间,可以一键知道最新的资源贴里有没有你想要的。

可以根据关键词,发帖作者名,筛选出最新发布的帖子里符合对应条件的帖子,把结果写入对应的html文件,显示效果类似论坛的图片模式,可直接点击链接进入帖子页面,参考下图。

可设置需要爬取的对应版块号,爬取页数,和需要排除的关键字,我把我的配置贴在下图以供参考。
.......

可以请教个ffmpeg录制直播的问题不?
ffmpeg录制m3u8直播的时候,一段时间后 会报错,每次报错的时候,都是停留在tls,下面是报错的一段输出:


复制代码
  1. [tls @ 00000195df6e9600] Error in the pull function.
  2. [hls @ 00000195de77dd80] Opening 'https://d1--cn-gotcha204.bilivideo.com/live-bvc/128417223/live_35359510_1658732_2500/64821814.m4s' for reading
  3. [NULL @ 00000195df1a46c0] Invalid NAL unit size (536531574 > 33342).
  4. [NULL @ 00000195df1a46c0] missing picture in access unit with size 33346
  5. [mpegts @ 00000195df3df5c0] Error applying bitstream filters to an output packet for stream #0: Invalid data found when processing input
  6. av_interleaved_write_frame(): Invalid data found when processing input


真的茫无头绪,ffmpeg交流的人太少了,刚好发现你之前发过ffmpeg的帖子.所以想请教一下.

a5.gif

keoki

B27F  2021-02-27 17:15
(一些脚本:https://bbs.imoutolove.me/read.php?tid=1353704)

回 12楼(railannad) 的帖子

不需要登录

a5.gif

keoki

B28F  2021-02-27 17:36
(一些脚本:https://bbs.imoutolove.me/read.php?tid=1353704)

回 26楼(qizihai) 的帖子

谷歌查查看吧,我这里录的时候没出现这种情况

none.gif

qizihai

B29F  2021-02-28 10:31
(隔江犹唱后庭花)

Re:回 26楼(qizihai) 的帖子

引用
引用第28楼3f341886于2021-02-27 17:36发表的 回 26楼(qizihai) 的帖子 :
谷歌查查看吧,我这里录的时候没出现这种情况

没查到有效的内容,可以问一下你的ffmpeg录制直播的参数怎么写吗?
我的是:
复制代码
  1. ffmpeg -user_agent "具体的agent" -referer "具体的refer" -i "https://d1--cn-gotcha204.video.com/live-bvc/326154/live_35359510233_1658732_4000/index.m3u8" -c copy "index20210227.ts"

26035353.gif

凉风有信

B30F  2021-02-28 11:54
(恶意中伤)
强啊