Responsive image

keoki - 2021-02-25 22:38 [GF]
主要目的是省去了每次上这几个论坛找资源的时间,可以一键知道最新的资源贴里有没有你想要的。

可以根据关键词,发帖作者名,筛选出最新发布的帖子里符合对应条件的帖子,把结果写入对应的html文件,显示效果类似论坛的图片模式,可直接点击链接进入帖子页面,参考下图。

可设置需要爬取的对应版块号,爬取页数,和需要排除的关键字,我把我的配置贴在下图以供参考。

爬取的结果会缓存到本地,每次爬取会对比缓存,筛选出之前爬取中没出现过的帖子放在html文件的最前面。







需要python3.8或以上

分别运行:

复制代码

  1. python daily_updates.py cunhua
    python daily_updates.py moxing
    python daily_updates.py laowang
    python daily_updates.py 2048


绿母恋母重口sm变态 - 2021-02-25 22:42 [B1F]
mark一手


123 - 2021-02-25 22:51 [B2F]
mark


不灭魔躯 - 2021-02-25 23:00 [B3F]
mark


食我大雕 - 2021-02-25 23:03 [B4F]


acbd - 2021-02-25 23:05 [B5F]
强啊


BeABetterMan - 2021-02-25 23:11 [B6F]
马克


3ffa0134 - 2021-02-25 23:11 [B7F]
    


云倦舒 - 2021-02-25 23:18 [B8F]


瓜子123 - 2021-02-25 23:23 [B9F]
真就科技改变生活


潇潇雨落 - 2021-02-25 23:26 [B10F]
mark


辣辣kk - 2021-02-26 09:49 [B11F]
mark


焰尾 - 2021-02-26 10:24 [B12F]
有内置cookie吗?    关键是没号


Zeno - 2021-02-26 10:39 [B13F]
mark


璀璨君 - 2021-02-26 10:50 [B14F]
mark


e86c73fc - 2021-02-26 10:56 [B15F]


6bcf7433 - 2021-02-26 11:38 [B16F]
又下不了,没爬的必有,吊胃口


S.Patrick - 2021-02-26 11:59 [B17F]
进来学代码


未半 - 2021-02-26 12:25 [B18F]
叔叔我啊。

已经下不动了

十几tb的硬盘几天就下满了

看都没看过

要这永久会员有啥用


WDNMD - 2021-02-27 02:59 [B19F]
大佬牛逼 开了个打赏贴
https://bbs.level-plus.net/read.php?tid=1109067


CC先生 - 2021-02-27 03:38 [B20F]
是科技改变XING生活


cd6ed368 - 2021-02-27 03:39 [B21F]


冯唐金线 - 2021-02-27 03:44 [B22F]
马克


多木知春 - 2021-02-27 06:22 [B23F]
mark


sins7 - 2021-02-27 06:33 [B24F]
插眼


可念不可说 - 2021-02-27 07:44 [B25F]
不会用hhh慢慢学


qizihai - 2021-02-27 13:13 [B26F]
引用
引用楼主3f341886于2021-02-25 22:38发表的 分享一个爬虫吧,可爬2048,cunhua,laowang,moxing论坛最新帖子 :
主要目的是省去了每次上这几个论坛找资源的时间,可以一键知道最新的资源贴里有没有你想要的。

可以根据关键词,发帖作者名,筛选出最新发布的帖子里符合对应条件的帖子,把结果写入对应的html文件,显示效果类似论坛的图片模式,可直接点击链接进入帖子页面,参考下图。

可设置需要爬取的对应版块号,爬取页数,和需要排除的关键字,我把我的配置贴在下图以供参考。
.......

可以请教个ffmpeg录制直播的问题不?
ffmpeg录制m3u8直播的时候,一段时间后 会报错,每次报错的时候,都是停留在tls,下面是报错的一段输出:


复制代码

  1. [tls @ 00000195df6e9600] Error in the pull function.
    [hls @ 00000195de77dd80] Opening 'https://d1--cn-gotcha204.bilivideo.com/live-bvc/128417223/live_35359510_1658732_2500/64821814.m4s' for reading
    [NULL @ 00000195df1a46c0] Invalid NAL unit size (536531574 > 33342).
    [NULL @ 00000195df1a46c0] missing picture in access unit with size 33346
    [mpegts @ 00000195df3df5c0] Error applying bitstream filters to an output packet for stream #0: Invalid data found when processing input
    av_interleaved_write_frame(): Invalid data found when processing input


真的茫无头绪,ffmpeg交流的人太少了,刚好发现你之前发过ffmpeg的帖子.所以想请教一下.


keoki - 2021-02-27 17:15 [B27F]
不需要登录


keoki - 2021-02-27 17:36 [B28F]
谷歌查查看吧,我这里录的时候没出现这种情况


qizihai - 2021-02-28 10:31 [B29F]
引用
引用第28楼3f341886于2021-02-27 17:36发表的 回 26楼(qizihai) 的帖子 :
谷歌查查看吧,我这里录的时候没出现这种情况

没查到有效的内容,可以问一下你的ffmpeg录制直播的参数怎么写吗?
我的是:
复制代码

  1. ffmpeg -user_agent "具体的agent" -referer "具体的refer" -i "https://d1--cn-gotcha204.video.com/live-bvc/326154/live_35359510233_1658732_4000/index.m3u8" -c copy "index20210227.ts"


凉风有信 - 2021-02-28 11:54 [B30F]
强啊






桌面版


Powered by SP Project v1.0 © 2010-2019
Time 0.002065 second(s),query:3 Gzip enabled


Top