有采集大佬吗？请问一个数据库入库的问题

dengwen168

本帖最后由 dengwen168 于 2019-8-6 08:23 编辑

采集的数据要写入cms的数据库，
遇到有外键的情况怎么处理好呢？

比如采集文章入库，文章分类所在的字段是文章分类的id。

这样就需要先执行一次数据库查询，查询到这个文章分类的id，再写入到文章所在的数据表。

入一条记录要查询一次，感觉这方法很笨啊，

大佬们有什么好的方法吗？

谢谢。。

loc2019

数据库查询反而是秒速，不用担心这个，别的操作都是龟速~

xior

可以考虑把分类组成一个数组  直接取就行了   。。。每次更新分类后需要重新更新这个数组

dakai

不懂为什么要先查询一次文章分类

我是一个大水怪

本帖最后由 我是一个大水怪 于 2019-8-6 09:22 编辑

dakai 发表于 2019-8-6 09:07

不懂为什么要先查询一次文章分类

因为他采集获取的是分类文本而不是分类id。

单独采集，不需要考虑数据库问题。其实你的应用应该也达不到需要考虑数据库的地步。
查询一次分类id其实也花不了啥时间（因为分类总体很小，如果你建了索引速度会更快），如果你真觉得不舒服，可以先加载所有文章分类到内存中（本质就是缓存），建立反向索引，每次直接查内存即可。

MYI

楼上   学到了

dengwen168

我是一个大水怪 发表于 2019-8-6 09:19

因为他采集获取的是分类文本而不是分类id。

单独采集，不需要考虑数据库问题。其实你的应用应该也达不到 ...
请问一下火车头之类的采集软件，

他们写入wordpress, dedecms之类的程序时，也是使用的这样的插入数据库的形式么？

谢谢。

duyu

网站的分类往往是个固定的ID，所以可以写在采集规则里。
如果用火车头的话，采集到的分类名是中文，可以使用文本替换的方式将分类名替换成网站里固定的分类ID

锦安

干掉外键

数据库不要用外键

miniliuke

dengwen168 发表于 2019-8-6 09:29

请问一下火车头之类的采集软件，

他们写入wordpress, dedecms之类的程序时，也是使用的这样的插入数据库 ...
不了解，抱歉帮助不了你。
锦安 发表于 2019-8-6 09:45

干掉外键

数据库不要用外键
小站可以，

大站不好吧。