最近想做一个便民类的 app 或者小程序,但是苦于没有官方的接口可以调用,想到一个思路是通过解析 ZF 网站的 HTML 页面从而提取到相关内容,最终做成一个接口供调用。考虑到以后该 app 可能加广告盈利(后话),不知这样做是否违法?
最近想做一个便民类的 app 或者小程序,但是苦于没有官方的接口可以调用,想到一个思路是通过解析 ZF 网站的 HTML 页面从而提取到相关内容,最终做成一个接口供调用。考虑到以后该 app 可能加广告盈利(后话),不知这样做是否违法?
首先谢谢大家的解惑。 可能没说清楚,我的操作其实很简单,就是别人请求我的接口时,我在接口中请求一次对应的ZF公示页面(已公开,任何人都可以用浏览器访问),然后解析得到的 HTML 字符串,加工成我需要的信息。
|
zm8m93Q1e5otOC69Jun 21, 2021
1
不是人家公开开放的数据都是非法的吧
|
|
vindacJun 21, 2021
2
页面地址发出来
|
|
3
@beichenhpy #1 但是这个数据( HTML 页面)是公开的呀,我只是通过加工一下 HTML 页面给自己提供接口
|
|
tsungkangJun 21, 2021
5
不要去搞他们的内部接口,理论上来说问题不大……
当然,具体背后有什么操作我就不知道了,公交地铁满地打广告的查老板查企业的那个网站,他们的数据就是抓取于[国家企业信用信息公示系统]( http://www.gsxt.gov.cn/) ,我看他们现在反而还挺生龙活虎的。 |
|
x86Jun 21, 2021
8
理论上 gov 的东西你没它的授权就不要去碰
|
|
ronmanJun 21, 2021 via Android
9
这种东西没事就没事,要真要找你茬,怎么着不都能给你扣个帽子?
|
|
zm8m93Q1e5otOC69Jun 21, 2021
10
@tsungkang #5 公示的可以用啊。。
|
|
EmotionVJun 21, 2021
12
爬一下放自己服务器,再接口调用,没啥问题
|
|
jr55475f112iz2tuJun 21, 2021
13
不盈利还好说,盈利的话 gov 如果想搞你总是能找到依据
|
|
clinoJun 21, 2021
14
是不是给结果的时候提供来源地址会好一些?
|
|
16
建议谨慎,如果要搞的话一定做好限流。这类网站普遍容量不大,万一你的 app 火了然后把公务网站拉崩了,少不得得喝顿茶。
|
|
zhaokunJun 21, 2021
18
这不是 google 、百度干的事儿嘛
|
|
l0wkeyJun 21, 2021
19
别每次请求都去爬,自己缓存就可以。
|
|
locozJun 21, 2021 via Android
21
爬了自己展示处理后的数据可以,直接做成跟反代差不多的接口不行。
|
|
jjianwen68Jun 21, 2021
22
统一 21L
|
|
23
|
|
ho121Jun 21, 2021
24
之前好像有过一个人爬到了还未正式发布的文件并自行公开,然后进去了
|
|
25
16# 说的直接上缓存就行了
信息本来就是公开的,只不过你做了一个聚合罢了。没啥事。 |
|
scxiaziJun 21, 2021
26
进去的不少 你可以试试
|
|
akiraJun 21, 2021
27
自动抓取应该是有风险的,具体咨询下律师吧
|