Исключение ClosedChannelException при использовании Ehcache

У меня проблема с Ehcache. Обычно это работает нормально, но иногда я получаю ClosedChannelException при попытке доступа к кешу, и как только это происходит, я могу обойти проблему только путем воссоздания кеша.

вот мой класс

package com.jthink.songkong.cache;

    import com.jthink.acoustid.acoustidschema.Result;
    import com.jthink.songkong.analyse.general.Errors;
    import org.ehcache.CachePersistenceException;
    import org.ehcache.config.builders.CacheConfigurationBuilder;
    import org.ehcache.config.builders.ExpiryPolicyBuilder;
    import org.ehcache.config.builders.ResourcePoolsBuilder;
    import org.ehcache.config.units.EntryUnit;
    import org.ehcache.config.units.MemoryUnit;
    import org.ehcache.core.statistics.CacheStatistics;

    import java.time.Duration;
    import java.util.Collection;
    import java.util.HashMap;
    import java.util.Map;

    /**
     * AcoustIdResult EhCache
     *
     */
    public class AcoustIdResultCache
    {
        protected org.ehcache.Cache<String, Result>           cache;

        public static final String ACOUSTID_RESULT_CACHE = "AcoustidResultCache";

        private static AcoustIdResultCache apc;

        private AcoustIdResultCache()
        {
           createCache();
        }

        static
        {
            apc = new AcoustIdResultCache();
        }

        public static AcoustIdResultCache getInstanceOf()
        {
            if (apc==null)
            {
                apc = new AcoustIdResultCache();
            }
            return apc;
        }


        /**
         * Create the Cache
         */
        private void createCache()
        {
            cache = SongKongCacheManager.getCacheManager().createCache(getCacheName(),
                    CacheConfigurationBuilder.newCacheConfigurationBuilder(
                            String.class,
                            Result.class,
                            ResourcePoolsBuilder.newResourcePoolsBuilder()
                                    .heap(300, EntryUnit.ENTRIES)
                                    .disk(500, MemoryUnit.MB, true)
                    )
                            .withExpiry(ExpiryPolicyBuilder.timeToIdleExpiration(Duration.ofDays(10)) //Since Acoustid is Live Db
                            )
            );
        }

        protected AcoustIdResultCache(String cacheName)
        {
            createCache();
        }

        public void init()
        {

        }

        /**
         * Close Cache Manager
         */
        public static void close()
        {
            SongKongCacheManager.getCacheManager().close();
        }

        public void emptyCache()
        {
            try
            {
                SongKongCacheManager.getCacheManager().destroyCache(getCacheName());
                createCache();
            }
            catch(CachePersistenceException cpe)
            {
                Errors.addError("Problem emptying cache for"+getCacheName()+":"+cpe.getMessage(), cpe);
            }
        }

        public void clearCacheStatistics()
        {
            SongKongCacheManager.getStatistics().getCacheStatistics(getCacheName()).clear();
        }

        /**
         *
         * @return cache name
         */
        protected String getCacheName()
        {
            return ACOUSTID_RESULT_CACHE;
        }

        /**
         *
         * @return cache
         */

        protected org.ehcache.Cache<String, Result> getCache()
        {
            return cache;
        }


        /**
         *
         * @return statistics of cache
         */
        public String statusCache()
        {
            CacheStatistics ehCacheStat = SongKongCacheManager.getStatistics().getCacheStatistics(getCacheName());
            return "CacheName:" + getCacheName()
                    + ":Put:"   + ehCacheStat.getCachePuts()
                    + ":Hit:"   + ehCacheStat.getCacheHits()
                    + ":Miss:"  + ehCacheStat.getCacheMisses()
                    + ":Evictions:"  + ehCacheStat.getCacheEvictions()
                    + ":Removals:"  + ehCacheStat.getCacheRemovals();
        }

        /**
         * Add an item to cache
         *
         * @param item
         */
        public void add(Result item)
        {
            addToCache(item);
        }

        /**
         * Get Item from cache
         *
         * @param id
         * @return the item or null
         */
        public  Result get(String id)
        {
            return getFromCache(id);
        }

        /**
         * Is there an item with this id in cache
         * @param id
         * @return
         */
        public boolean isInCache(String id)
        {
            return getCache().containsKey(id);
        }

        /**
         *
         * @param id
         * @return item for this id or null if doesn't not exist
         */
        protected   Result getFromCache(String id)
        {
            return getCache().get(id);
        }

        /**
         * For adding multiple items to cache
         *
         * @param items
         * @return
         */
        public  boolean addToCache(Collection<Result> items)
        {
            try
            {
                Map<String, Result> map = new HashMap<String, Result>();
                for(Result acoustidResult:items)
                {
                    map.put(acoustidResult.getId(), acoustidResult);
                }
                getCache().putAll(map);
                return true;
            }
            catch(Exception e)
            {
                Errors.addError("Failed AddResultToCache:" + e.getMessage(), e);
                return false;
            }
        }

        /**
         * Add item to cache
         *
         * @param item
         */
        protected  boolean addToCache(Result item)
        {
            try
            {
                getCache().putIfAbsent(item.getId(), item);
                return true;
            }
            catch(Exception e)
            {
                Errors.addError("Failed AddAcoustidToCache:"+item.getId()+ ':' +e.getMessage(),e);
                return false;
            }
        }
    }

и это трассировка стека

java.lang.RuntimeException: java.nio.channels.ClosedChannelException
    at org.terracotta.offheapstore.disk.storage.FileBackedStorageEngine$FileChunk$1.setLong(FileBackedStorageEngine.java:677)
    at org.ehcache.impl.internal.store.offheap.LazyOffHeapValueHolder.writeBack(LazyOffHeapValueHolder.java:82)
    at org.ehcache.impl.internal.store.offheap.AbstractOffHeapStore.lambda$flush$16(AbstractOffHeapStore.java:865)
    at org.ehcache.impl.internal.store.disk.EhcachePersistentConcurrentOffHeapClockCache.lambda$computeIfPinned$3(EhcachePersistentConcurrentOffHeapClockCache.java:213)
    at org.terracotta.offheapstore.OffHeapHashMap.computeIfPresentWithMetadata(OffHeapHashMap.java:2096)
    at org.terracotta.offheapstore.AbstractLockedOffHeapHashMap.computeIfPresentWithMetadata(AbstractLockedOffHeapHashMap.java:604)
    at org.terracotta.offheapstore.concurrent.AbstractConcurrentOffHeapMap.computeIfPresentWithMetadata(AbstractConcurrentOffHeapMap.java:781)
    at org.ehcache.impl.internal.store.disk.EhcachePersistentConcurrentOffHeapClockCache.computeIfPinned(EhcachePersistentConcurrentOffHeapClockCache.java:210)
    at org.ehcache.impl.internal.store.offheap.AbstractOffHeapStore.flush(AbstractOffHeapStore.java:858)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.lambda$setInvalidationListener$19(OnHeapStore.java:914)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.lambda$evict$28(OnHeapStore.java:1552)
    at org.ehcache.impl.internal.concurrent.ConcurrentHashMap.computeIfPresent(ConcurrentHashMap.java:1848)
    at org.ehcache.impl.internal.store.heap.SimpleBackend.computeIfPresent(SimpleBackend.java:130)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.evict(OnHeapStore.java:1547)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.enforceCapacity(OnHeapStore.java:1514)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.resolveFault(OnHeapStore.java:745)
    at org.ehcache.impl.internal.store.heap.OnHeapStore.getOrComputeIfAbsent(OnHeapStore.java:692)
    at org.ehcache.impl.internal.store.tiering.TieredStore.get(TieredStore.java:88)
    at org.ehcache.core.Ehcache.doGet(Ehcache.java:90)
    at org.ehcache.core.EhcacheBase.get(EhcacheBase.java:127)
    at com.jthink.songkong.cache.AcoustIdResultCache.getFromCache(AcoustIdResultCache.java:177)
    at com.jthink.songkong.cache.AcoustIdResultCache.get(AcoustIdResultCache.java:157)
    at com.jthink.songkong.analyse.acoustid.AcoustidHelper.getMusicBrainzAcoustidResultsFromCacheOrDb(AcoustidHelper.java:136)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSingleSongMatcher.getReleasesByAcoustid(MusicBrainzSingleSongMatcher.java:99)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSingleSongMatcher.queryForCandidateReleasesByArtistTitleAndReleaseForSingleSong(MusicBrainzSingleSongMatcher.java:335)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSingleSongMatcher.matchSingleSongToReleaseUsingExistingFileMetadata(MusicBrainzSingleSongMatcher.java:396)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSingleSongMatcher.match(MusicBrainzSingleSongMatcher.java:72)
    at com.jthink.songkong.analyse.analyser.AbstractMusicBrainzGroupMatcher.matchSongs(AbstractMusicBrainzGroupMatcher.java:146)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSongGroupMatcher1.doTask(MusicBrainzSongGroupMatcher1.java:420)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSongGroupMatcher.call(MusicBrainzSongGroupMatcher.java:469)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSongGroupMatcher1.call(MusicBrainzSongGroupMatcher1.java:97)
    at com.jthink.songkong.analyse.analyser.MusicBrainzSongGroupMatcher1.call(MusicBrainzSongGroupMatcher1.java:40)
    at java.util.concurrent.FutureTask.run(FutureTask.java:266)
    at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149)
    at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624)
    at java.lang.Thread.run(Thread.java:748)
Caused by: java.nio.channels.ClosedChannelException
    at sun.nio.ch.FileChannelImpl.ensureOpen(FileChannelImpl.java:110)
    at sun.nio.ch.FileChannelImpl.write(FileChannelImpl.java:758)
    at org.terracotta.offheapstore.disk.storage.FileBackedStorageEngine.writeBufferToChannel(FileBackedStorageEngine.java:393)
    at org.terracotta.offheapstore.disk.storage.FileBackedStorageEngine.writeLongToChannel(FileBackedStorageEngine.java:388)
    at org.terracotta.offheapstore.disk.storage.FileBackedStorageEngine.access$700(FileBackedStorageEngine.java:60)
    at org.terracotta.offheapstore.disk.storage.FileBackedStorageEngine$FileChunk$1.setLong(FileBackedStorageEngine.java:675)
    ... 35 more

Я не понимаю, почему это происходит, моя первая мысль, что я должен изменить

  protected org.ehcache.Cache<String, Result> getCache()
  {
     return cache;
  }

к

  protected org.ehcache.Cache<String, Result> getCache()
  {
      if (cache==null)
      {
          cache = createCache();
      }
      return cache;
  }

но почему кеш когда-либо будет нулевым?

Моя вторая мысль заключается в том, что есть проблема с многопоточностью, но я предполагаю, что Ehcache является потокобезопасным?

ClosedChannelException означает, что EhCache не удалось выполнить запись в файл. Канал, который когда-то был открыт, теперь закрыт. Используете ли вы какое-то сетевое хранилище файлов или что-то, что может стать нестабильным во время выполнения и привести к закрытию канала открытого файла?
jbx 30.05.2019 09:39

@jbx На самом деле ошибка предназначена только для конкретного клиента, я не думаю, что они хранят кеш в сетевом хранилище, но я жду ответа.

Paul Taylor 30.05.2019 11:08

Ну, ошибка явно говорит о том, что не удалось записать в файл, потому что канал каким-то образом закрылся. Поскольку это FileChannel, с файлом что-то пошло не так.

jbx 30.05.2019 12:36

@jbx - это все потокобезопасно, тогда может быть любая проблема, вызванная чтением или записью нескольких потоков в кеш.

Paul Taylor 30.05.2019 12:46

Что ж, это может быть проблема безопасности потоков, но ошибка, похоже, не так сильно связана с потоками. Если только один поток не закрыл канал, а другой ожидал, что он все еще открыт. Вы можете попробовать установить явную блокировку: ehcache.org/documentation/2.8/apis/explicitlocking.html

jbx 30.05.2019 13:00

Это несколько замедлило бы работу, раньше у меня были эти данные в базе данных, но затем я перешел на Ehcache, потому что понял, что данные не изменились, и поэтому мне не требовался полный контроль БД ACID. Доступ к кешу осуществляется только через этот класс, поэтому я действительно хотел проверить, в порядке ли мой код в многопоточной среде или нет.

Paul Taylor 30.05.2019 15:24

Сообщенная проблема с github: github.com/ehcache/ehcache3/issues/2908

cdalxndr 27.05.2021 16:37
Пользовательский скаляр GraphQL
Пользовательский скаляр GraphQL
Листовые узлы системы типов GraphQL называются скалярами. Достигнув скалярного типа, невозможно спуститься дальше по иерархии типов. Скалярный тип...
Как вычислять биты и понимать побитовые операторы в Java - объяснение с примерами
Как вычислять биты и понимать побитовые операторы в Java - объяснение с примерами
В компьютерном программировании биты играют важнейшую роль в представлении и манипулировании данными на двоичном уровне. Побитовые операции...
Поднятие тревоги для долго выполняющихся методов в Spring Boot
Поднятие тревоги для долго выполняющихся методов в Spring Boot
Приходилось ли вам сталкиваться с требованиями, в которых вас могли попросить поднять тревогу или выдать ошибку, когда метод Java занимает больше...
Полный курс Java для разработчиков веб-сайтов и приложений
Полный курс Java для разработчиков веб-сайтов и приложений
Получите сертификат Java Web и Application Developer, используя наш курс.
1
7
267
1
Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

В этой области было несколько ошибок. Я думаю, что вы стали жертвой варианта: https://github.com/Terracotta-OSS/offheap-store/pull/53

Если бы вы могли обновиться до Ehcache 3.7.1, который содержит исправления для этих проблем, и посмотреть, сможете ли вы воспроизвести. Если это не решит проблему, отправьте сообщение об ошибке по адресу https://github.com/ehcache/ehcache3.

Спасибо, Крис, я был на 3.7.0, так что это могло иметь смысл. Я сделаю новую сборку, отправлю клиенту и посмотрю, решит ли это проблему.

Paul Taylor 31.05.2019 11:07

Никаких дальнейших отчетов, поэтому я думаю, что это исправлено.

Paul Taylor 25.08.2019 08:26

Другие вопросы по теме