У меня проблемы с памятью на подчиненном экземпляре Solr.
Проблема в том, что каждый раз, когда ведомое устройство реплицирует новые изменения от ведущего устройства, ведомое устройство запускает новый поисковик, и, очевидно, старый не освобождается.
В конце концов молодая коллекция заполняется и перетекает в старую коллекцию (или, по крайней мере, так, как она выглядит), и начинает выполнять постоянные полные сборки мусора. На данный момент, похоже, на самом деле он не может освободить какую-либо заметную память. Полная сборка мусора может привести к тому, что поиски, выполнение которых обычно занимает несколько миллисекунд, могут занять до ½-4 секунды с пиками примерно каждые 10 секунд.
И опять же, в какой-то момент даже старое поколение заполнено, а затем оно либо останавливает все, и успевает освободить часть памяти, либо кажется, что оно полностью блокируется, очевидно, чтобы никогда не вернуться к нормальной работе.
Некоторая системная информация:
Это машина Amazon AWS m1.medium:
3.7GB memory
20GB HDD space
1 CPU core
2 ECU (1 ECU is the equivalent CPU capacity of a 1.0-1.2 GHz 2007 Opteron or 2007 Xeon processor).
ОС: Ubuntu 12.10
Ява :
java version "1.7.0_09"
OpenJDK Runtime Environment (IcedTea7 2.3.3) (7u9-2.3.3-0ubuntu1~12.10.1)
OpenJDK 64-Bit Server VM (build 23.2-b09, mixed mode)
Сервлет Java: Tomcat 7
Solr: 4.0
Параметры запуска Tomcat:
-Djava.io.tmpdir=/tmp/tomcat7-tomcat7-tmp
-Dcatalina.home=/usr/share/tomcat7
-Dcatalina.base=/var/lib/tomcat7
-Djava.endorsed.dirs=/usr/share/tomcat7/endorsed
-javaagent:/spm/spm-monitor/lib/spm-monitor-solr-1.8.0-withdeps.jar=/spm/spm-monitor/conf/spm-monitor-config-[snip]-default.xml
-Dcom.sun.management.jmxremote
-Xloggc:/var/log/tomcat7/GCLog.txt
-XX:+PrintGCDetails
-XX:NewSize=500M
-Xmx3G
-Xms3G
-Dsolr.solr.home=/data/solr
-Djava.util.logging.manager=org.apache.juli.ClassLoaderLogManager
-XX:+UseConcMarkSweepGC
-Xmx128m
-Djava.awt.headless=true
-Djava.util.logging.config.file=/var/lib/tomcat7/conf/logging.properties
вещь spm-monitor - это система мониторинга от SemaText.
Solr имеет 4 ядра, по 1 для каждой из 4 стран, и содержит информацию о продукте. В 3 ядрах содержится небольшое количество документов, а в 4-м - около 470 тыс. Документов. Индекс этого ядра в настоящее время занимает 843 МБ.
Вот мой файл solrconfig.xml: http://pastebin.com/c5vHKgMF
И мой schema.xml: http://pastebin.com/tFA4bmT5
Я использую pastebin, потому что иначе этот пост был бы слишком большим.
Вот как вывод jstat -gc [pid] 2s ищет различные события:
Когда solr запускается, он работает нормально, и все запросы занимают нормальное время:
S0C S1C S0U S1U EC EU OC OU PC PU YGC YGCT FGC FGCT GCT
51200.0 51200.0 51200.0 0.0 409600.0 49393.0 2633728.0 751578.5 24896.0 24736.6 4 7.271 0 0.000 7.271
51200.0 51200.0 51200.0 51200.0 409600.0 409600.0 2633728.0 968965.2 24896.0 24826.1 5 7.271 0 0.000 7.271
51200.0 51200.0 0.0 51200.0 409600.0 392671.8 2633728.0 1082530.8 27584.0 27504.1 5 10.459 0 0.000 10.459
51200.0 51200.0 51200.0 51200.0 409600.0 409600.0 2633728.0 1249210.0 27776.0 27578.9 7 11.822 0 0.000 11.822
51200.0 51200.0 51200.0 0.0 409600.0 90674.5 2633728.0 1484383.0 27776.0 27676.6 8 14.380 1 0.064 14.444
51200.0 51200.0 51200.0 0.0 409600.0 333155.3 2633728.0 1484383.0 28544.0 28450.1 8 14.380 1 0.064 14.444
51200.0 51200.0 51200.0 0.0 409600.0 335203.3 2633728.0 1484383.0 28544.0 28453.7 8 14.380 1 0.064 14.444
51200.0 51200.0 51200.0 0.0 409600.0 337251.4 2633728.0 1269719.9 47424.0 28459.8 8 14.380 2 0.542 14.922
51200.0 51200.0 0.0 51200.0 409600.0 1515.0 2633728.0 1347052.7 47424.0 28557.9 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 96780.5 2633728.0 1347052.7 47424.0 28634.0 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 103202.9 2633728.0 1347052.7 47424.0 28666.7 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 103203.1 2633728.0 1347052.7 47424.0 28666.7 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 109626.5 2633728.0 1347052.7 47424.0 28668.5 9 15.025 2 0.542 15.567
Это первая репликация. Запуск полного сборщика мусора часто происходит после репликации, вызывая паузы в ½-4 секунды при поиске:
S0C S1C S0U S1U EC EU OC OU PC PU YGC YGCT FGC FGCT GCT
51200.0 51200.0 0.0 51200.0 409600.0 181746.1 2633728.0 1347052.7 47424.0 28745.4 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 181746.3 2633728.0 1347052.7 47424.0 28745.4 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 186884.2 2633728.0 1347052.7 47424.0 28746.4 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 186884.3 2633728.0 1347052.7 47424.0 28746.4 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 217818.1 2633728.0 1347052.7 47424.0 28754.1 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 217818.3 2633728.0 1347052.7 47424.0 28754.1 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 222957.2 2633728.0 1347052.7 47424.0 28754.8 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 222957.3 2633728.0 1347052.7 47424.0 28754.8 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 229379.7 2633728.0 1347052.7 47424.0 28756.3 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 265260.5 2633728.0 1347052.7 47424.0 30313.9 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 298923.2 2633728.0 1347052.7 47424.0 31046.5 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 301654.4 2633728.0 1347052.7 47424.0 31048.7 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 312181.6 2633728.0 1347052.7 47424.0 31051.6 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 314912.8 2633728.0 1347052.7 47424.0 31051.6 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 324156.0 2633728.0 1347052.7 47424.0 31160.7 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 329617.6 2633728.0 1347052.7 47424.0 31299.6 9 15.025 2 0.542 15.567
51200.0 51200.0 0.0 51200.0 409600.0 361996.8 2633728.0 1347052.7 47424.0 31382.4 9 15.025 2 0.542 15.567
51200.0 51200.0 30088.6 0.0 409600.0 217328.7 2633728.0 1398099.4 47424.0 32633.0 10 15.316 2 0.542 15.858
51200.0 51200.0 51200.0 51200.0 409600.0 409600.0 2633728.0 1843888.2 47424.0 32853.0 12 16.800 2 0.542 17.342
51200.0 51200.0 51200.0 51200.0 409600.0 409600.0 2633728.0 2049137.6 47424.0 32864.9 13 19.310 3 0.628 19.938
51200.0 51200.0 0.0 51200.0 409600.0 334292.6 2633728.0 2202213.0 47424.0 32873.8 13 22.241 3 0.628 22.869
51200.0 51200.0 51200.0 51200.0 409600.0 409600.0 2633728.0 2391020.4 47424.0 32876.1 14 22.241 3 0.628 22.869
51200.0 51200.0 51200.0 0.0 409600.0 72530.9 2633728.0 2544393.5 47424.0 32892.1 14 26.071 3 0.628 26.699
51200.0 51200.0 51200.0 0.0 409600.0 84458.3 2633728.0 2520856.9 54832.0 32898.3 14 26.071 5 0.883 26.954
51200.0 51200.0 51200.0 0.0 409600.0 90076.2 2633728.0 2520856.9 54832.0 32899.5 14 26.071 5 1.139 27.210
51200.0 51200.0 51200.0 0.0 409600.0 93651.1 2633728.0 2426346.3 55024.0 32899.9 14 26.071 6 1.387 27.458
51200.0 51200.0 51200.0 0.0 409600.0 102844.1 2633728.0 2426346.3 55024.0 32899.9 14 26.071 7 1.643 27.714
51200.0 51200.0 51200.0 0.0 409600.0 103739.1 2633728.0 2426346.3 55024.0 32901.0 14 26.071 7 1.643 27.714
51200.0 51200.0 51200.0 0.0 409600.0 133067.1 2633728.0 2426242.2 55024.0 32904.8 14 26.071 8 1.899 27.970
51200.0 51200.0 51200.0 0.0 409600.0 133946.5 2633728.0 2426227.6 55024.0 32904.9 14 26.071 9 2.175 28.245
51200.0 51200.0 51200.0 0.0 409600.0 139729.7 2633728.0 2426227.6 55024.0 32907.3 14 26.071 9 2.175 28.245
51200.0 51200.0 51200.0 0.0 409600.0 140141.2 2633728.0 2426227.6 55024.0 32907.3 14 26.071 10 2.175 28.245
51200.0 51200.0 51200.0 0.0 409600.0 146923.3 2633728.0 2426226.6 55024.0 32909.0 14 26.071 11 2.761 28.831
51200.0 51200.0 51200.0 0.0 409600.0 148190.4 2633728.0 2426226.6 55024.0 32909.3 14 26.071 11 2.761 28.831
51200.0 51200.0 51200.0 0.0 409600.0 162871.6 2633728.0 2426176.5 55024.0 32912.4 14 26.071 12 3.062 29.132
51200.0 51200.0 51200.0 0.0 409600.0 164115.7 2633728.0 2426176.5 55024.0 32912.4 14 26.071 13 3.375 29.445
51200.0 51200.0 51200.0 0.0 409600.0 169801.3 2633728.0 2426167.1 55024.0 32912.6 14 26.071 14 3.677 29.747
51200.0 51200.0 51200.0 0.0 409600.0 170464.9 2633728.0 2426167.0 55024.0 32913.0 14 26.071 15 3.978 30.048
51200.0 51200.0 51200.0 0.0 409600.0 176939.4 2633728.0 2426167.0 55024.0 32913.3 14 26.071 16 4.292 30.363
51200.0 51200.0 51200.0 0.0 409600.0 177982.8 2633728.0 2426167.0 55024.0 32916.8 14 26.071 17 4.602 30.673
51200.0 51200.0 51200.0 0.0 409600.0 207087.6 2633728.0 2426167.0 55024.0 32919.0 14 26.071 18 4.952 31.022
51200.0 51200.0 51200.0 0.0 409600.0 207915.5 2633728.0 2426167.0 55024.0 32920.0 14 26.071 19 5.289 31.359
51200.0 51200.0 51200.0 0.0 409600.0 213503.3 2633728.0 2426167.0 55024.0 32922.7 14 26.071 20 5.641 31.711
51200.0 51200.0 51200.0 0.0 409600.0 214918.9 2633728.0 2426167.0 55024.0 32922.9 14 26.071 21 6.053 32.124
51200.0 51200.0 51200.0 0.0 409600.0 221854.4 2633728.0 2426167.0 55024.0 32922.9 14 26.071 21 6.053 32.124
51200.0 51200.0 51200.0 0.0 409600.0 222649.1 2633728.0 2426167.0 55024.0 32922.9 14 26.071 23 6.763 32.834
51200.0 51200.0 51200.0 0.0 409600.0 228783.4 2633728.0 2426167.0 55024.0 32923.9 14 26.071 23 6.763 32.834
51200.0 51200.0 51200.0 0.0 409600.0 229735.2 2633728.0 2426149.5 55024.0 32924.7 14 26.071 25 7.521 33.591
51200.0 51200.0 51200.0 0.0 409600.0 235296.9 2633728.0 2426149.5 55024.0 32925.6 14 26.071 25 7.521 33.591
51200.0 51200.0 51200.0 0.0 409600.0 236130.0 2633728.0 2426149.4 55024.0 32925.6 14 26.071 27 8.260 34.331
51200.0 51200.0 51200.0 0.0 409600.0 243076.6 2633728.0 2426149.4 55024.0 32925.6 14 26.071 27 8.260 34.331
51200.0 51200.0 51200.0 0.0 409600.0 243960.8 2633728.0 2426149.4 55024.0 32926.3 14 26.071 29 9.029 35.100
51200.0 51200.0 51200.0 0.0 409600.0 273105.0 2633728.0 2426149.4 55024.0 32930.8 14 26.071 29 9.029 35.100
51200.0 51200.0 51200.0 0.0 409600.0 274353.8 2633728.0 2425918.4 55024.0 32932.0 14 26.071 31 9.436 35.507
51200.0 51200.0 51200.0 0.0 409600.0 279947.9 2633728.0 2425918.4 55024.0 32932.1 14 26.071 31 9.842 35.913
51200.0 51200.0 51200.0 0.0 409600.0 280804.8 2633728.0 2425853.6 55024.0 32932.1 14 26.071 32 10.258 36.329
51200.0 51200.0 51200.0 0.0 409600.0 288224.7 2633728.0 2425853.6 55024.0 32932.1 14 26.071 33 10.669 36.740
51200.0 51200.0 51200.0 0.0 409600.0 288924.5 2633728.0 2425801.3 55024.0 32932.1 14 26.071 34 11.086 37.157
51200.0 51200.0 51200.0 0.0 409600.0 294579.7 2633728.0 2425801.3 55024.0 32932.1 14 26.071 35 11.496 37.567
51200.0 51200.0 51200.0 0.0 409600.0 295011.3 2633728.0 2425756.8 55024.0 32932.3 14 26.071 36 11.937 38.007
51200.0 51200.0 51200.0 0.0 409600.0 300928.6 2633728.0 2425749.2 55024.0 32932.3 14 26.071 37 12.364 38.434
51200.0 51200.0 51200.0 0.0 409600.0 302173.1 2633728.0 2425749.2 55024.0 32932.3 14 26.071 38 12.794 38.865
51200.0 51200.0 51200.0 0.0 409600.0 309040.9 2633728.0 2425748.9 55024.0 32932.7 14 26.071 39 13.221 39.291
51200.0 51200.0 51200.0 0.0 409600.0 309776.0 2633728.0 2425748.9 55024.0 32932.7 14 26.071 40 13.221 39.291
51200.0 51200.0 51200.0 0.0 409600.0 338791.4 2633728.0 2425748.9 55024.0 32937.5 14 26.071 41 14.111 40.182
51200.0 51200.0 51200.0 0.0 409600.0 339363.3 2633728.0 2425748.9 55024.0 32937.5 14 26.071 41 14.111 40.182
И это вторая репликация, где все почти зависает. На этом этапе все запросы занимают не менее 30 секунд:
S0C S1C S0U S1U EC EU OC OU PC PU YGC YGCT FGC FGCT GCT
51200.0 51200.0 0.0 0.0 409600.0 104445.7 2633728.0 2264909.9 55024.0 32909.4 15 26.071 68 33.808 59.879
51200.0 51200.0 0.0 0.0 409600.0 131077.9 2633728.0 2264909.9 55024.0 32912.0 15 26.071 69 33.902 59.973
51200.0 51200.0 0.0 0.0 409600.0 131078.1 2633728.0 2264909.9 55024.0 32912.0 15 26.071 69 33.902 59.973
51200.0 51200.0 0.0 51200.0 409600.0 0.0 2633728.0 2313467.9 55024.0 32925.0 16 26.533 70 34.030 60.563
51200.0 51200.0 51200.0 0.0 409600.0 272264.2 2633728.0 2621778.0 55024.0 32925.4 17 28.589 71 34.113 62.702
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2621778.0 55024.0 32925.7 18 28.589 72 34.113 62.702
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2621778.0 55024.0 32925.7 18 28.589 72 34.113 62.702
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2621778.0 55024.0 32925.7 18 28.589 72 34.113 62.702
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2621778.0 55024.0 32925.7 18 28.589 72 34.113 62.702
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32929.0 18 28.589 74 56.386 84.975
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32929.0 18 28.589 74 56.386 84.975
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32929.0 18 28.589 74 56.386 84.975
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32929.0 18 28.589 74 56.386 84.975
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32929.0 18 28.589 74 56.386 84.975
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 76 80.943 109.532
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 76 80.943 109.532
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 76 80.943 109.532
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 76 80.943 109.532
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 76 80.943 109.532
51200.0 51200.0 24901.3 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.0 18 28.589 77 105.639 134.229
51200.0 51200.0 51199.5 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.2 18 28.589 78 106.270 134.859
51200.0 51200.0 51199.5 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.2 18 28.589 78 106.270 134.859
51200.0 51200.0 51199.5 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.2 18 28.589 78 106.270 134.859
51200.0 51200.0 51199.5 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.2 18 28.589 78 106.270 134.859
51200.0 51200.0 37977.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32935.7 18 28.589 79 130.681 159.270
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 80 131.342 159.932
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 80 131.342 159.932
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 80 131.342 159.932
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 80 131.342 159.932
51200.0 51200.0 44939.3 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 81 155.284 183.874
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 82 155.957 184.547
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 82 155.957 184.547
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 82 155.957 184.547
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 82 155.957 184.547
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 82 155.957 184.547
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 84 181.848 210.437
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 84 181.848 210.437
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 84 181.848 210.437
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32936.2 18 28.589 84 181.848 210.437
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32922.9 18 28.589 84 181.848 210.437
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32922.9 18 28.589 85 206.950 235.539
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32922.9 18 28.589 85 206.950 235.539
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32922.9 18 28.589 85 206.950 235.539
51200.0 51200.0 51109.1 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32919.2 18 28.589 86 224.879 253.469
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32919.2 18 28.589 87 225.545 254.135
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32919.2 18 28.589 87 225.545 254.135
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32919.2 18 28.589 87 225.545 254.135
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32919.2 18 28.589 87 225.545 254.135
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32914.3 18 28.589 87 225.545 254.135
51200.0 51200.0 51194.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32914.5 18 28.589 88 250.623 279.213
51200.0 51200.0 51194.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32914.5 18 28.589 88 250.623 279.213
51200.0 51200.0 51194.9 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 88 250.623 279.213
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.1 18 28.589 89 266.103 294.693
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.1 18 28.589 89 266.103 294.693
51200.0 51200.0 51200.0 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.1 18 28.589 89 266.103 294.693
51200.0 51200.0 51184.2 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 91 284.683 313.272
51200.0 51200.0 51184.2 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 91 284.683 313.272
51200.0 51200.0 51184.2 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 91 284.683 313.272
51200.0 51200.0 51184.2 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 91 284.683 313.272
51200.0 51200.0 51184.2 0.0 409600.0 409600.0 2633728.0 2633727.9 55024.0 32901.1 18 28.589 91 284.683 313.272
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.3 18 28.589 92 309.958 338.547
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.3 18 28.589 92 309.958 338.547
51200.0 51200.0 51199.9 0.0 409600.0 409600.0 2633728.0 2633728.0 55024.0 32901.3 18 28.589 92 309.958 338.547
Выход jstat -gccause [pid] показывает следующее:
S0 S1 E O P YGC YGCT FGC FGCT GCT LGCC GCC
100.00 0.00 100.00 100.00 59.79 18 28.589 94 327.704 356.293 Allocation Failure Allocation Failure
У меня также есть дамп кучи из того момента, когда он перестал даже отвечать на запросы, поэтому, если кому-то нужен какой-то вывод из jhat Я могу это предоставить.
Кто-нибудь знает, почему solr / tomcat / java делает это? Я могу воспроизводить его последовательно, поэтому, если вам нужна дополнительная информация для отладки, я могу ее предоставить.
-Xmx3G
-Xms3G
-Dsolr.solr.home = / data / solr
-Djava.util.logging.manager = org.apache.juli.ClassLoaderLogManager
-XX: + UseConcMarkSweepGC
-Xmx128м
Почему у вас две настройки максимальной кучи? Это была ошибка копирования и вставки? Или так настроен ваш кот? Также посмотрите, можете ли вы уменьшить минимальную кучу до 512 МБ или 1 ГБ. Одинаковый размер минимальной и максимальной кучи обычно не рекомендуется.