您提到的所有挑战都可以在ARKit/SceneKit和ARKit/RealityKit中解决。

选择配置

1.确定真实的环境中的对象或图像，并在那里创建锚。
您可以使用ARKit中的以下配置识别3D objects或Images：

let configuration = ARWorldTrackingConfiguration()

guard let obj = ARReferenceObject.referenceObjects(inGroupNamed: "Resources", 
                                                         bundle: nil) 
else { return }

configuration.detectionObjects = obj     // Allows you create ARObjectAnchor
sceneView.session.run(configuration)

对比

let config = ARWorldTrackingConfiguration()

guard let img = ARReferenceImage.referenceImages(inGroupNamed: "Resources", 
                                                       bundle: nil) 
else { return }

config.detectionImages = img             // Allows you create ARImageAnchor
config.maximumNumberOfTrackedImages = 3
sceneView.session.run(config)

但是，如果您想在RealityKit中实现类似的行为，请使用以下代码：

let objectAnchor = AnchorEntity(.object(group: "Resources", name: "object"))

或

let imageAnchor = AnchorEntity(.image(group: "Resources", name: "model"))

渲染引擎

1.渲染附着到锚的虚拟模型。
目前，ARKit有四个同伴帮助您渲染3D和2D图形：

• RealityKit（3D引擎）
• 场景套件（3D引擎）
• 金属（3D引擎）
• SpriteKit（2D引擎）

材料
1.使虚拟模型显示为遮挡。
RealityKit模块中所有的物料都是符合Material协议的结构，目前有6种物料，需要OcclusionMaterial。

*OcclusionMaterial（隐藏在其后面渲染的对象的不可见材质）
*简单材质（可应用于网格的基本材质）
*UnlitMaterial（不响应场景中灯光的简单材质）
*VideoMaterial（允许您使用AVPlayer播放视频的素材）
*PhysicallyBasedMaterial（模拟真实世界对象外观的材质）
*自定义物料（名称为自描述的物料）
查看THIS POST，了解如何在RealityKit中以编程方式指定材质。
本文将向您展示如何在SceneKit中指定自定义遮挡材质。

更新3D内容

1.使虚拟模型与图像/对象锚沿着移动。
要在ARKit + SceneKit中实现这种类型的行为，您必须使用renderer(_:didAdd:for:)或session(_:didAdd:)方法。
以下是在renderer(_:didAdd:for:)示例方法中使用ARObjectAnchor的示例：

extension ViewController: ARSCNViewDelegate {
    
    func renderer(_ renderer: SCNSceneRenderer,
                 didAdd node: SCNNode,
                  for anchor: ARAnchor) {
                
        if let _ = anchor as? ARObjectAnchor {                
            let text = SCNText(string: "ARKit", extrusionDepth: 0.5)
            let textNode = SCNNode(geometry: text)
            node.addChildNode(textNode)
        }
    }
}