爬虫爬到的字典数据,只会分成两个列表然后构造 sql 语句 有没有简洁的写法?
爬虫爬到的字典数据,只会分成两个列表然后构造 sql 语句 有没有简洁的写法?
|
virusdefenderSep 15, 2016 via iPhone
1
json
|
|
CosimoZiSep 15, 2016
2
尽量不要二次解析
|
|
techmoeSep 15, 2016 via Android
3
我也不想二次解析,但是在不考虑检索条件下 dumps 成 json 的确是一个很好理解也很方便的办法。
|
|
keenkillerSep 15, 2016 via Android
4
用 mongo
|
|
Arthur2e5Sep 15, 2016
5
json 在不少数据库里面都有专门的数据格式支持,所以说真的……(
|
|
reusSep 16, 2016
6
用 postgres 的 jsonb 类型,支持索引
|
|
qq7171891Sep 19, 2016
7
我直接存,读出来的时候用 eval()还原。
|
|
Arthur2e5Sep 27, 2016
8
@qq7171891 暂时不吐槽你在 Python 版里面 eval JSON ,我先告诉你这样子对 JS 都行不通:
http://timelessrepo.com/json-isnt-a-javascript-subset JS 也好, Py 也好,为什么就是不愿意去用专门的东西呢? |
|
Arthur2e5Sep 27, 2016
9
@qq7171891 (啊…继续歪楼。)
其实刚才直接说不能 eval 也不对,至少 ES5 是可以了, JSON 设计目标之一也是这个: https://github.com/judofyr/timeless/issues/57 问题是明明可以避免数据库中邪恶管理员插入的任意代码执行的…… |
|
Arthur2e5Sep 27, 2016
10
(对不起,我把 issue 看错了……啊自己真是的。)
|