アップグレード中に新しいデータストアを追加する

Aug 24 2020

リポジトリの更新中に、バイナリコンテンツをセグメントストアから新しいデータストアに移行したいと思います。私のリポジトリの現在のバージョンは1.6.1です。TarMKセグメントストアを使用しており、データストアはありません。私の経験では、ファイルデータストアにバイナリを含めると、パフォーマンスが大幅に向上します。これが、1.26.0へのアップグレードでやりたいことです。しかし、どのようにしてバイナリを新しいデータストアにコピーするのでしょうか。

このコマンドは、コンテンツを新しいリポジトリに移行します。アプリケーションはコンテンツを適切にロードします。しかし、データストアはありません。

$ java -jar ~/oak-upgrade-1.26.0.jar --copy-binaries 
    --copy-orphaned-versions=false --copy-versions=false 
    --include-paths=/apps/lsa,/content/lsa,/var/recyclebin/content/lsa 
    ../dev-jun-author/sling/repository sling/repository

このコマンドを使用してバイナリを新しいデータストアにコピーしようとすると...

  $ java -jar ~/oak-upgrade-1.26.0.jar --copy-binaries 
         --include-paths=/apps/lsa,/content/lsa,/var/recyclebin/content/lsa 
         --datastore=sling/repository/datastore ../dev-jun-author/sling/repository sling/repository

以下の出力があります。

2020年8月24日16：43：12.263 [メイン] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.MigrationOptions - 1969年12月31日2020年8月24日〜16組のパラメータcopyVersions：43：12.265 [メイン] INFO ORG .apache.jackrabbit.oak.upgrade.cli.parser.MigrationOptions - 1969年12月31日2020年8月24日〜16組のパラメータcopyOrphanedVersions：43：12.265 [メイン] INFOのorg.apache.jackrabbit.oak.upgrade.cli.parser。 MigrationOptions -含めるためのパス：[/アプリ/ LSA /コンテンツ/ LSA / VAR / RECYCLEBIN /コンテンツ/ LSA] 2020年8月24日16：43：12.265 [メイン] INFOのorg.apache.jackrabbit.oak.upgrade.cli。 parser.MigrationOptions-キャッシュサイズ：256 MB 24.08.2020 16：43：12.269 [メイン]情報org.apache.jackrabbit.oak.upgrade.cli.parser.StoreArguments-ソース：SEGMENT_TAR [../ dev-jun-author / sling / repository] 24.08.2020 16：43：12.271 [main] INFO org.apache.jackrabbit .oak.upgrade.cli.parser.StoreArguments -宛先：SEGMENT_TAR [スリング/リポジトリ] 2020年8月24日16：43：12.296 [メイン] INFO org.apache.jackrabbit.oak.segment.file.FileStore -作成ファイルストアFileStoreBuilder { version = 1.26.0、directory = ../ dev-jun-author / sling / repository / segmentstore、blobStore = null、maxFileSize = 256、segmentCacheSize = 256、stringCacheSize = 256、templateCacheSize = 64、stringDeduplicationCacheSize = 15000、templateDeduplicationCacheSize = 3000 、nodeDeduplicationCacheSize = 1048576、memoryMapping = false、offHeapAccess = false、gcOptions = SegmentGCOptions {paused = false、estimationDisabled = false、gcSizeDeltaEstimation = 1073741824、retryCount = 5、forceTimeout = 60、retainedGenerations = 2、gcType = FULL}} 24.08.2020 16 ：43：12.428 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore-TarMK ReadOnlyが開かれました：../ dev -jun-author / sling / repository / segmentstore（mmap = false）24.08.2020 16：43：12.601 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore-TarMKが閉じられました：../ dev-jun -author / sling / repository / segmentstore 24.08.2020 16：43：12.618 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.DatastoreArguments-SEGMENT_TAR [../ dev-jun-author /に埋め込まれたブロブsling / repository]はFileDataStore [sling / repository / datastore]にコピーされます24.08.202016：43：12.619 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.DatastoreArguments-ソースblobストア：DummyBlobStore 24.08 0.2020 16：43：12.619 [メイン] INFO org.apache.jackrabbit.oak.segment.file.FileStore -作成ファイルストアFileStoreBuilder {バージョン= 1.26.0、ディレクトリ= .. / DEV-Junの著者/スリング/リポジトリ/ segmentstore、blobStore = null、maxFileSize = 256、segmentCacheSize = 256、stringCacheSize = 256、templateCacheSize = 64、stringDeduplicationCacheSize = 15000、templateDeduplicationCacheSize = 3000、nodeDeduplicationCacheSize = 1048576、memoryMapping = true 、offHeapAccess = false、gcOptions = SegmentGCOptions {paused = false、estimationDisabled = false、gcSizeDeltaEstimation = 1073741824、retryCount = 5、forceTimeout = 60、retainedGenerations = 2、gcType = FULL}} 24.08.2020 16：43：12.632 [main] INFO org.apache.jackrabbit.oak.segment.file.ReadOnlyFileStore-TarMK ReadOnlyが開かれました：../ dev-jun-author / sling / repository / segmentstore（mmap = true）24.08.2020 16：43：12.635 [main] INFO org .apache.jackrabbit.oak.segment.SegmentNodeStore $ SegmentNodeStoreBuilder

作成セグメントノードストアSegmentNodeStoreBuilderは{ブロブストア=インライン} 2020年8月24日16：43：12.644 [主] INFO org.apache.jackrabbit.oak.segment.scheduler.LockBasedScheduler -初期化SegmentNodeStore commitFairLockオプション付きで有効。24.08.2020 16：43：12.654 [main] INFO org.apache.jackrabbit.oak.upgrade.cli.parser.DatastoreArguments-宛先blobストア：FileDataStore [sling / repository / datastore] 24.08.2020 16：43：12.665 [main ] INFO org.apache.jackrabbit.oak.segment.file.FileStore -作成ファイルストアFileStoreBuilder {バージョン= 1.26.0、ディレクトリ=スリング/リポジトリ/ segmentstore、ブロブストア=ストア担保ブロブストア[org.apache.jackrabbit.oak.plugins .blob.datastore.OakFileDataStore]、maxFileSize = 256、segmentCacheSize = 256、stringCacheSize = 256、templateCacheSize = 64、stringDeduplicationCacheSize = 15000、templateDeduplicationCacheSize = 3000、nodeDeduplicationCacheSize = 1048576、memoryMapping = true、offHeapAccess = false、gcOptions = SegmentGCOptions {paused = false、estimationDisabled = false、gcSizeDeltaEstimation = 1073741824、retryCount = 5、forceTimeout = 60、retainedGenerations = 2、gcType = FULL}}

スリングのエラーログにはこの出力があります

25.08.2020 10：32：35.030エラー[0：0：0：0：0：0：0：1 [1598365955029] GET /content/lsa/assets/Screen%20Shot%202020-04-15%20at%204.06。 14％20 PM.png HTTP / 1.1] org.apache.sling.engine.impl.SlingRequestProcessorImplサービス：キャッチされていないスロー可能java.lang.IllegalStateException：blobId [d4c06d8a7e0b3381caa5c918d6403319d603dd153e5ce32f663e940af55 jackrabbit.oak.segment.SegmentBlob.getBlob（SegmentBlob.java:248）[org.apache.jackrabbit.oak-segment-tar：1.26.0] at org.apache.jackrabbit.oak.segment.SegmentBlob.getNewStream（SegmentBlob。 java：253）[org.apache.jackrabbit.oak-segment-tar：1.26.0] at org.apache.jackrabbit.oak.segment.SegmentBlob.getNewStream（SegmentBlob.java:84）[org.apache.jackrabbit.oak -segment-tar：1.26.0] at org.apache.jackrabbit.oak.plugins.value.jcr.BinaryImpl.getStream（BinaryImpl.java:59）[org.apache.jackrabbit.oak-store-spi：1.26.0 ] org.apache.sling.jcr.resource.internal.helper.LazyInputStream.getStrで eam（LazyInputStream.java:106）[org.apache.sling.jcr.resource：3.0.20] at org.apache.sling.jcr.resource.internal.helper.LazyInputStream.read（LazyInputStream.java:65）[org .apache.sling.jcr.resource：3.0.20] at org.apache.commons.io.IOUtils.copyLarge（IOUtils.java:2314）[org.apache.commons.io:2.6.0] at org.apache commons.io.IOUtils.copy（IOUtils.java:2270）[org.apache.commons.io:2.6.0] at org.apache.commons.io.IOUtils.copyLarge（IOUtils.java:2291）[org.apache .commons.io：2.6.0] at org.apache.commons.io.IOUtils.copy（IOUtils.java:2246）[org.apache.commons.io:2.6.0] at com.peregrine.rendition.RenditionsServlet $ StreamResponse.writeTo（RenditionsServlet.java:191）[com.peregrine-cms.base.core：1.0.0.SNAPSHOT] at com.peregrine.commons.servlets.AbstractBaseServlet.doRequest（AbstractBaseServlet.java:133）at com.peregrine .commons.servlets.AbstractBaseServlet.doGet（AbstractBaseServlet.java:82）at org.apache.sling.api.servlets.SlingSafeMethodsServlet.mayService（SlingSafeMethodsServlet.java:266）[org.apache.s ling.api：2.22.0] at org.apache.sling.api.servlets.SlingAllMethodsServlet.mayService（SlingAllMethodsServlet.java:137）[org.apache.sling.api：2.22.0] at org.apache.sling.api .servlets.SlingSafeMethodsServlet.service（SlingSafeMethodsServlet.java:342）[org.apache.sling.api：2.22.0] at org.apache.sling.api.servlets.SlingSafeMethodsServlet.service（SlingSafeMethodsServlet.java:374）[org。 apache.sling.api：2.22.0] at org.apache.sling.engine.impl.request.RequestData.service（RequestData.java:552）[org.apache.sling.engine：2.7.2] at org.apache .sling.engine.impl.filter.SlingComponentFilterChain.render（SlingComponentFilterChain.java:44）[org.apache.sling.engine：2.7.2] at org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain .java：82）[org.apache.sling.engine：2.7.2] at org.apache.sling.engine.impl.SlingRequestProcessorImpl.processComponent（SlingRequestProcessorImpl.java:283）[org.apache.sling.engine：2.7。 2] org.apache.sling.engine.impl.filter.RequestSlingFilterChaで in.render（RequestSlingFilterChain.java:49）[org.apache.sling.engine：2.7.2] at org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain.java:82）[org.apache .sling.engine：2.7.2] at org.apache.sling.engine.impl.debug.RequestProgressTrackerLogFilter.doFilter（RequestProgressTrackerLogFilter.java:110）[org.apache.sling.engine：2.7.2] atorg.apache。 sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain.java:72）[org.apache.sling.engine：2.7.2] at org.apache.sling.i18n.impl.I18NFilter.doFilter（I18NFilter.java： 131）[org.apache.sling.i18n：2.5.14] at org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain.java:72）[org.apache.sling.engine：2.7.2 ] at org.apache.sling.engine.impl.filter.AbstractSlingFilterChain.doFilter（AbstractSlingFilterChain.java:78）[org.apache.sling.engine：2.7.2] atorg.apache.sling.engine.impl.SlingRequestProcessorImpl。 doProcessRequest（SlingRequestProcessorImpl.java:151）[または g.apache.sling.engine：2.7.2] at org.apache.sling.engine.impl.SlingMainServlet.service（SlingMainServlet.java:250）[org.apache.sling.engine：2.7.2] at org.apache .felix.http.base.internal.handler.ServletHandler.handle（ServletHandler.java:123）[org.apache.felix.http.jetty：4.0.18] at org.apache.felix.http.base.internal.dispatch .InvocationChain.doFilter（InvocationChain.java:86）[org.apache.felix.http.jetty：4.0.18] at org.apache.sling.junit.impl.servlet.TestLogServlet$TestNameLoggingFilter.doFilter(TestLogServlet.java:257) [org.apache.sling.junit.core:1.0.26] at org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] at org.apache.sling.i18n.impl.I18NFilter.doFilter(I18NFilter.java:131) [org.apache.sling.i18n:2.5.14] at org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] at org.apache.sling.engine.impl.log.RequestLoggerFilter.doFilter(RequestLoggerFilter.java:75) [org.apache.sling.engine:2.7.2] at org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] at org.apache.sling.engine.impl.parameters.RequestParameterSupportConfigurer.doFilter(RequestParameterSupportConfigurer.java:67) [org.apache.sling.engine:2.7.2] at org.apache.felix.http.base.internal.handler.FilterHandler.handle(FilterHandler.java:142) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.dispatch.InvocationChain.doFilter(InvocationChain.java:81) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.dispatch.Dispatcher$1.doFilter（Dispatcher.java:146）[org.apache.felix.http.jetty：4.0.18] at org.apache.felix.http.base.internal.whiteboard.WhiteboardManager$2.doFilter(WhiteboardManager.java:1002) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.sslfilter.internal.SslFilter.doFilter(SslFilter.java:97) [org.apache.felix.http.sslfilter:1.2.6] at org.apache.felix.http.base.internal.handler.PreprocessorHandler.handle(PreprocessorHandler.java:136) [org.apache.felix.http.jetty:4.0.18] at org.apache.felix.http.base.internal.whiteboard.WhiteboardManager$2.doFilter（WhiteboardManager.java:1008）[org.apache.felix.http.jetty：4.0.18] at org.apache.felix.http.base.internal.whiteboard.WhiteboardManager.invokePreprocessors（WhiteboardManager.java:1012） [org.apache.felix.http.jetty：4.0.18] at org.apache.felix.http.base.internal.dispatch.Dispatcher.dispatch（Dispatcher.java:91）[org.apache.felix.http.jetty ：4.0.18] at org.apache.felix.http.base.internal.dispatch.DispatcherServlet.service（DispatcherServlet.java:49）[org.apache.felix.http.jetty：4.0.18] atjavax.servlet。 http.HttpServlet.service（HttpServlet.java:725）[org.apache.felix.http.servlet-api：1.1.2] at org.eclipse.jetty.servlet.ServletHolder.handle（ServletHolder.java:763）[org .apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.servlet.ServletHandler.doHandle（ServletHandler.java:551）[org.apache.felix.http.jetty：4.0.18] atorg。 eclipse.jetty.server.handler.ScopedHandler.nextHandle（ScopedHandler.java:233）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.session.SessionHandler.d oHandle（SessionHandler.java:1610）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.handler.ScopedHandler.nextHandle（ScopedHandler.java:233）[org.apache.felix .http.jetty：4.0.18] at org.eclipse.jetty.server.handler.ContextHandler.doHandle（ContextHandler.java：1363）[org.apache.felix.http.jetty：4.0.18] at org.eclipse jetty.server.handler.ScopedHandler.nextScope（ScopedHandler.java:188）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.servlet.ServletHandler.doScope（ServletHandler.java:489） [org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.session.SessionHandler.doScope（SessionHandler.java:1580）[org.apache.felix.http.jetty：4.0.18 ] at org.eclipse.jetty.server.handler.ScopedHandler.nextScope（ScopedHandler.java:186）[org.apache.felix.http.jetty：4.0.18] atorg.eclipse.jetty.server.handler.ContextHandler。 doScope（ContextHandler.java:1278）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.handler.ScopedHandler.handle（ScopedHandler.java:141）[または g.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle（ContextHandlerCollection.java:221）[org.apache.felix.http.jetty：4.0.18] org.eclipse.jetty.server.handler.HandlerWrapper.handle（HandlerWrapper.java:127）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.Server.handle（Server .java：500）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.HttpChannel.lambda$handle$1（HttpChannel.java:383）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server.HttpChannel.dispatch（HttpChannel.java:547）[org.apache.felix.http .jetty：4.0.18] at org.eclipse.jetty.server.HttpChannel.handle（HttpChannel.java:375）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.server HttpConnection.onFillable（HttpConnection.java:273）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.io.AbstractConnection$ReadCallback.succeeded(AbstractConnection.java:311) [org.apache.felix.http.jetty:4.0.18] at org.eclipse.jetty.io.FillInterest.fillable(FillInterest.java:103) [org.apache.felix.http.jetty:4.0.18] at org.eclipse.jetty.io.ChannelEndPoint$2.run（ChannelEndPoint.java:117）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask（EatWhatYouKill.java:336）[org .apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce（EatWhatYouKill.java:313）[org.apache.felix.http.jetty：4.0.18 ] org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.tryProduce（EatWhatYouKill.java:171）[org.apache.felix.http.jetty：4.0.18] atorg.eclipse.jetty.util.thread。 strategy.EatWhatYouKill.run（EatWhatYouKill.java:129）[org.apache.felix.http.jetty：4.0.18] at org.eclipse.jetty.util.thread.ReservedThreadExecutor$ReservedThread.run(ReservedThreadExecutor.java:375) [org.apache.felix.http.jetty:4.0.18] at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:806) [org.apache.felix.http.jetty:4.0.18] at org.eclipse.jetty.util.thread.QueuedThreadPool$Runner.run（QueuedThreadPool.java:938）[org.apache.felix.http.jetty：4.0.18] at java.base / java.lang.Thread.run（Thread.java:834）

リポジトリにいくつかのフォルダがあるデータストアがあることがわかります。しかし、私のSlingアプリの画像は機能していません。oak-upgradeまたはその他のユーティリティを使用してバイナリをデータストアに移行するにはどうすればよいですか？

回答

wimsymons Sep 01 2020 at 15:25

私はずっと前に一度これをしました。リポジトリを分割するコマンドは正しいようです。oak-upgradeツールを実行した後、データストアフォルダーをチェックして、作成されたファイルがあるかどうかを確認できます。

新しい（分割された）リポジトリの場所でSlingを開始する前に、ファイルデータストアを使用するために必要な構成ファイルを作成することを忘れないでください。

少なくとも次のプロパティを含むフォルダにorg.apache.jackrabbit.oak.plugins.blob.datastore.FileDataStore.configファイルを作成しますinstall。

path="./repository/datastore"

また、少なくともこのプロパティを含むフォルダにorg.apache.jackrabbit.oak.plugins.segment.SegmentNodeStoreService.configファイルを作成しますinstall。

customBlobStore=B"true"

oak-upgradeツールによってデフォルトで使用されるminRecordLengthは16384バイトです。

見る https://jackrabbit.apache.org/oak/docs/osgi_config.html#config-sling 詳細については。

また、バイナリを分割するときに、コンテンツの部分的な移行を行わないことをお勧めします。Slingのすべてがコンテンツであり、OSGiバンドルなども含まれます。