Commit Graph

25 Commits

Author SHA1 Message Date
DIYgod
285ccdaca3 feat: remove wasi, close #2361 2019-06-10 17:10:41 +08:00
dxmpalb
60f3d43c7f fix: 瓦斯author链接更改 (#2358) 2019-06-10 11:58:35 +08:00
dxmpalb
da449c1689 fix: wasi url again (#2318)
* Update wasi.js

* Update wasi.js
2019-06-04 18:31:35 +08:00
凉凉
218c06f96c fix: wasi url (#2314) 2019-06-04 16:27:33 +08:00
DIYgod
a56c0b5a39 refactor: rename axios to got 2019-06-03 18:03:05 +08:00
DIYgod
163a589e20 Merge branch 'master' into feature/got 2019-06-03 17:06:48 +08:00
Chenyang Shi
e895dcf05a feat: 微信公众号(tgchanel)全文 (#2208)
* enhance: 微信公众号(tgchanel)全文

fix 2 typos

* enhance: 添加作者并兼容多个公众号情况
2019-05-24 17:44:17 +08:00
Chenyang Shi
09e331988a feat: add 公众号Telegrame 频道来源 (#2205)
* feat: add 公众号Telegrame 频道来源

* 去掉全文抓取
2019-05-22 22:46:53 +08:00
DIYgod
e2badbfa98 chore: module alias for all routes 2019-05-15 15:27:15 +08:00
DIYgod
a0333fbd7e feat: use contentExpire 2019-05-09 01:23:29 +08:00
DIYgod
a99c1b1fbb fix wasi 2019-04-22 13:19:44 +08:00
DIYgod
de32ba0ffe arraybuffer to buffer 2019-04-18 00:09:44 +08:00
Chenyang Shi
af303e075b fix guyu 501 (#1884)
closes #1878
2019-04-08 11:30:08 +08:00
Chenyang Shi
fb92f06190 add 谷雨 (#1844)
closes #1841
2019-03-29 16:05:00 +08:00
凉凉
b3d938032d Hotfix: dajia (#1709) 2019-03-11 10:51:41 +08:00
Henry Wang
e72f82e983 chore: 部分代码优化 (#1674) 2019-03-04 19:26:09 +08:00
Henry Wang
2aff7a8e1c fix: WEMP 路由 (#1656) 2019-03-04 19:16:19 +08:00
Henry Wang
b9e16cae89 feat: 增加微信传送门输出 (#1661)
由于网站很容易给 503,只取 5 篇
close #1397
2019-03-04 19:06:28 +08:00
Henry Wang
86c2102d32 feat: wemp 输出公众号直链+全文 (#1649) 2019-03-02 22:12:35 +08:00
dxmpalb
59447e4b89 add 懂球帝头条&专题新闻 optimize 瓦斯公众号历史文章 (#1612)
详细解释一下增加瓦斯公众号历史文章的原因:
* 目前的瓦斯公众号抓取(阅读器为Inoreader为例):想要抓取某微信公众号的“日报”栏目时,利用瓦斯源,加上参数过滤,理想状态下是可以抓取到想要的内容的;但是,Inoreader刚添加订阅源时,很大可能订阅源是空的(即该公众号上一次所发布的文章中不含“日报”关键字),此时阅读器会把抓取间隔设置为比较大的值(假设为6小时)。而6小时内,公众号发布了两次内容,第一次含“日报”,第二次不含“日报”,这样的话,阅读器再次抓取时,订阅源仍然为空,抓取间隔继续加大……最终导致根本抓取不到想要的内容。(叙述可能有些混乱,实际测试中确实如此,测试使用之一是“央视新闻”公众号的“早啊!新闻来了”栏目,几天(不含周末)下来,并未抓到一篇文章,其他例子中情况类似)
* 抓取历史文章的情况下:条数限制为20,通常情况下很少公众号一天能发布超过20篇文章,因此首次理论上能抓到几篇想要的文章(“日报”等),然后接下来阅读器抓取频率并不会降低(最终会稳定在栏目发布间隔这个时间)。实际测试中确实有比较好的效果,而且不加参数过滤的话也完全不受影响。
2019-02-25 11:37:20 +08:00
Henry Wang
44189d5261 fix: handle wemp future pubDate (#1546) 2019-02-19 11:26:40 +08:00
Chenyang Shi
ba3ef16542 add 腾讯大家的作者与专栏 (#1537)
closes #1535
2019-02-13 14:29:14 +08:00
Henry Wang
21a7bf375c 增加虎嗅网用户文章 (#1462)
以及时区 timezone util 类
2019-01-29 19:16:36 +08:00
Henry Wang
bf0ecf0ae9 增加微信公众号 wemp.app 路径 (#1469) 2019-01-28 18:13:16 +08:00
DIYgod
38a90e29b0 optimize directory structure 2018-12-26 18:35:10 +08:00