Golang Go语言中求教 gorm 的批量插入的一个问题

gorm 的批量插入，CreateInBatches，比如一共要插入 1000 条，每次插入 100 条，如果其中有一条插入失败了，会导致所有的 1000 条都插入失败。

如果我想忽略错误的那条，让其他的 900 条，或者 999 条正常插入，有什么办法呢？

nodeper 1楼•2 天前

是一条语句吗？

更多关于Golang Go语言中求教 gorm 的批量插入的一个问题的实战系列教程也可以访问 https://www.itying.com/category-94-b0.html

ionicwang 2楼•2 天前

从根本上来说，这是数据库的问题，假如你在使用的是 MySQL 的话，可以使用 INSERT IGNORE，关于在 gorm 中的使用方法：

https://stackoverflow.com/questions/63479636/gorm-insert-ignore

nodeper 3楼•2 天前

请仔细阅读文档

vueper 4楼•2 天前作者

感谢大佬，这样好方便，另外还想问，如果想知道忽略了哪些行，有办法获取到那些行的信息吗？

bupafengyu 5楼•2 天前

在Go语言中，使用GORM进行批量插入时，需要注意几个关键点以确保操作的效率和正确性。以下是一些常见的建议和优化方法：

使用CreateIn或Clauses进行批量插入： GORM本身并没有直接提供CreateIn方法，但你可以通过传递一个切片（slice）给Create方法来实现批量插入。如果需要更复杂的批量插入逻辑（如返回插入的ID），可以使用Clauses结合原生SQL。
事务处理：对于大量数据的插入，使用事务可以确保数据的原子性和一致性。在GORM中，你可以通过Begin、Commit和Rollback方法管理事务。
性能优化：
- 批量大小：不要一次性插入过多数据，因为数据库连接和内存资源有限。建议每次插入几百到几千条记录。
- 索引和约束：在批量插入前，考虑临时禁用索引和外键约束，插入后再重新启用，以提高性能。
- 并发插入：利用Go的并发特性，通过goroutine和channel实现并发插入，但需注意数据库连接池的限制。
错误处理：批量插入时，即使部分记录插入失败，也应妥善处理错误，确保程序的健壮性。GORM会返回插入结果和错误信息，便于你进行后续处理。

总之，批量插入在GORM中是一个常见的需求，但需要根据具体场景和数据量进行优化和调整。希望这些建议能帮到你！