mysql sphinx生成唯一id

Question

我将我的数据库分为 8 个部分，其中每个部分都包含带有表 user_data 的数据库，为了获得更好的搜索性能，我使用 sphinx 来索引所有这些数据，但我遇到了一个问题...因为表 user_data 没有任何唯一字段来表示每个部分行，但它是一个一对多的表，我无法正确运行我的 sphinx 索引，因为它需要唯一的 id，并且这种方式可以解决重复的 id ...知道我该如何解决这个问题吗？或者通过来自不同段的所有子索引生成唯一的ID？

示例：

SELECT user_id, item_id, info
FROM user_data

返回类似以下内容：

+----------+-----------------------+
| user_id  | item_id    | info     |
+----------+-----------------------+
| 10       | 151        | asdf     |
| 10       | 152        | test     |
| 11       | 151        | 545      |
| 12       | 151        | sdfsd    |
| 12       | 152        | eewwe    |
| 12       | 153        | dfsd     |

但我必须知道

+----------+-----------------------------+
| user_id  | item_id    | info     | id  |
+----------+-----------------------------+
| 10       | 151        | asdf     | 1   |
| 10       | 152        | test     | 2   |
| 11       | 151        | 545      | 3   |
| 12       | 151        | sdfsd    | 4   |
| 12       | 152        | eewwe    | 5   |
| 12       | 153        | dfsd     | 6   |

id 当然在所有段中必须是唯一的

Answer 1

首先，您应该在操作查询之前设置来设置变量，

sql_query_pre = SET @a := 1;

然后使用此变量来获取虚构的自动增量

sql_query = SELECT @a := @a + 1 AS id, user_id, item_id, info FROM user_data

Answer 2

我不熟悉 Sphinx，但如果您希望创建跨表唯一的 id，在您的情况下：

1. 一种选择是使用 UUID 作为所有表的唯一索引——它们发生冲突的可能性很小。
2. 另一种选择是，如果您知道表的最大大小，则仅使用该范围内的数字加上偏移量。例如，表 1 的 id：1 - 10000，表 2 的 id：10001 - 20000 等。您甚至可以将 id 字段设置为 AUTO_INCRMENT 并将其起始编号设置为特定范围的开始。

Answer 3

您可以在索引时执行类似的操作：

SELECT user_id + 10 * 1 AS id, 1 ASegment_id, itme_id, info FROM user_data_1

...添加 segment_id。您将拥有其中 8 个，因此索引查询将类似于：

SELECT (user_id + 10) * 1 AS id, 1 AS segment_id, itme_id, info FROM user_data_1
UNION
SELECT (user_id + 10) * 2 AS id, 2 AS segment_id, itme_id, info FROM user_data_2
UNION
SELECT (user_id + 10) * 3 AS id, 3 AS segment_id, itme_id, info FROM user_data_3
UNION
SELECT (user_id + 10) * 4 AS id, 4 AS segment_id, itme_id, info FROM user_data_4
UNION
SELECT (user_id + 10) * 5 AS id, 5 AS segment_id, itme_id, info FROM user_data_5
UNION
SELECT (user_id + 10) * 6 AS id, 6 AS segment_id, itme_id, info FROM user_data_6
UNION
SELECT (user_id + 10) * 7 AS id, 7 AS segment_id, itme_id, info FROM user_data_7
UNION
SELECT (user_id + 10) * 8 AS id, 8 AS segment_id, itme_id, info FROM user_data_8

然后，当您查询 sphinx 并返回 ID 时，只需将 id 除以 segment_id 并减去 10。这样所有的 id 在 sphinx 中都是唯一的。只需确保属性类型可以处理您要索引的 id 的大小即可。

Answer 4

正如另一个答案中建议的那样，使用 UUID。但sphinx不能使用UUID作为id。你需要一个 INT。因此使用UUID_SHORT，然后你就有一个唯一的整数（对于mysql）。如果这不能开箱即用（例如，如果您正在使用 Ubuntu-11.04），您将收到如下错误：

WARNING: DOCID_MAX document_id, skipping

您将需要使用 –enable-id64 编译 sphinx 源代码，或者只需访问 sphinx 网站并获取最新的软件包（使用 –enable-id64 编译）。 此博客条目

Answer 5

我们使用 crc32(uuid_short()) 来实现 sphinx 的 32 位。这在大多数情况下都有效！办公室。不能依赖 32 位摘要