From limolsys ＠ nifty.com Sun Aug 7 14:40:20 2011 From: limolsys ＠ nifty.com (limolsys ＠ nifty.com) Date: Sun, 7 Aug 2011 14:40:20 +0900 (JST) Subject: [fess-user 508] =?iso-2022-jp?b?VG9tY2F0NyAbJEIkSxsoQiBGZXNzNC4wIBskQiRyO30bKEI=?= =?iso-2022-jp?b?GyRCJEMkRiQkJEMkRiRfJD83bxsoQg==?= Message-ID: <9639269.124321312695620107.limolsys@nifty.com> クニカタです。お世話になっております。 こちらの環境で、標記移行テストを昨日から やりはじめました。 菅谷さんも、一昨日くらいからやっているようだったので、 ちょいとびっくりしました。 菅谷さんtweet>自前のtldが見つからないと怒られたので これはこちらの環境でも再現しました。fe.tldですよね。 あと、こちらではTomcat7に同梱されている managerアプリを使ってしまっているのですが、 どうやらそれが、Tomcat6のものとは仕様が 変わっているようです。 Fess管理「システム設定」画面で Solrの稼動状況取得や、Solrアプリ(コンテキスト)の起動 などに、下記URLへアクセスするようなのですが、 localhost:8080/manager/list localhost:8080/manager/start〜〜〜 これらが、効かないようでした。 以上、参考まで。 From shinsuke ＠ yahoo.co.jp Sun Aug 7 20:37:20 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Sun, 7 Aug 2011 20:37:20 +0900 Subject: [fess-user 509] Re: =?iso-2022-jp?b?VG9tY2F0NyAbJEIkSxsoQiBGZXNzNC4wIBskQiRyGyhC?= =?iso-2022-jp?b?GyRCO30kQyRGJCQkQyRGJF8kPzdvGyhC?= In-Reply-To: <9639269.124321312695620107.limolsys@nifty.com> References: <9639269.124321312695620107.limolsys@nifty.com> Message-ID: 菅谷です． 情報をありがとうございます． fe.tld は対応したのですが，manager とかは まだ確認してなかったので，対応していきたいと 思います． shinsuke 2011年8月7日14:40 : > クニカタです。お世話になっております。 > > こちらの環境で、標記移行テストを昨日から > やりはじめました。 > > 菅谷さんも、一昨日くらいからやっているようだったので、 > ちょいとびっくりしました。 > > 菅谷さんtweet>自前のtldが見つからないと怒られたので > > これはこちらの環境でも再現しました。fe.tldですよね。 > > あと、こちらではTomcat7に同梱されている > managerアプリを使ってしまっているのですが、 > どうやらそれが、Tomcat6のものとは仕様が > 変わっているようです。 > > Fess管理「システム設定」画面で > Solrの稼動状況取得や、Solrアプリ(コンテキスト)の起動 > などに、下記URLへアクセスするようなのですが、 > localhost:8080/manager/list > localhost:8080/manager/start〜〜〜 > これらが、効かないようでした。 > > 以上、参考まで。 > > _______________________________________________ > Fess-user mailing list > Fess-user ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/fess-user > From makoto.satoh ＠ ngb.co.jp Tue Aug 9 10:57:37 2011 From: makoto.satoh ＠ ngb.co.jp (makoto.satoh) Date: Tue, 09 Aug 2011 10:57:37 +0900 (JST) Subject: [fess-user 510] =?iso-2022-jp?b?c21iGyRCJEckTiUvJW0hPCVrJEskRCQkJEYbKEI=?= Message-ID: <1312855057.28272.makoto.satoh@ngb.co.jp> 佐藤と申します。 FESS 4.0.1をWindows Server 2008 R2でテストしています。 ファイルシステムクロールの設定にて、LANDISKというNAS上のパスを 設定したところ、クロールがうまく行きませんでした。 パスにはこのように設定しています。 例：smb://landisk/disk/proofs/hoge/ クロールして欲しいファイルは、smb://landisk/disk/proofs/hoge/12345/hoge.html というHTMLファイルです。 この12345という階層のディレクトリ数が28,000あります。 fess_crawler.outを見ると、smb://landisk/disk/proofs/hoge/12345/ の階層まではFESSは辿ってくれていますが、その下のHTMLファイルまでは 辿ってくれていません。 このhogeディレクトリの中から3つほどディレクトリをコピーしてきて、 smb://landisk/disk/proofs/test/　というパスでクロール設定をすると、 それら３つのディレクトリ下のHTMLファイルをクロールしてくれました。 何かパラメータの設定で多数のディレクトリを扱うように調整したりできますか？ よろしくご教授ください。 From shinsuke ＠ yahoo.co.jp Tue Aug 9 11:34:27 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Tue, 9 Aug 2011 11:34:27 +0900 Subject: [fess-user 511] Re: =?iso-2022-jp?b?c21iGyRCJEckTiUvJW0hPCVrJEskRCQkJEYbKEI=?= In-Reply-To: <1312855057.28272.makoto.satoh@ngb.co.jp> References: <1312855057.28272.makoto.satoh@ngb.co.jp> Message-ID: 菅谷です。 > 何かパラメータの設定で多数のディレクトリを扱うように調整したりできますか？ 特にそれ用の設定はありません。 何が原因がクロールしていないのかわかりませんが メモリ不足であれば fess.dicon の -Xmx の値を 調整していただくと良いかもしれません。 よろしくお願いいたします。 shinsuke 2011年8月9日10:57 makoto.satoh : > 佐藤と申します。 > > FESS 4.0.1をWindows Server 2008 R2でテストしています。 > > ファイルシステムクロールの設定にて、LANDISKというNAS上のパスを > 設定したところ、クロールがうまく行きませんでした。 > > パスにはこのように設定しています。 > 例：smb://landisk/disk/proofs/hoge/ > > クロールして欲しいファイルは、smb://landisk/disk/proofs/hoge/12345/hoge.html > というHTMLファイルです。 > > この12345という階層のディレクトリ数が28,000あります。 > > fess_crawler.outを見ると、smb://landisk/disk/proofs/hoge/12345/ > の階層まではFESSは辿ってくれていますが、その下のHTMLファイルまでは > 辿ってくれていません。 > > このhogeディレクトリの中から3つほどディレクトリをコピーしてきて、 > smb://landisk/disk/proofs/test/　というパスでクロール設定をすると、 > それら３つのディレクトリ下のHTMLファイルをクロールしてくれました。 > > 何かパラメータの設定で多数のディレクトリを扱うように調整したりできますか？ > > よろしくご教授ください。 > > _______________________________________________ > Fess-user mailing list > Fess-user ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/fess-user > From makoto.satoh ＠ ngb.co.jp Tue Aug 9 12:55:16 2011 From: makoto.satoh ＠ ngb.co.jp (makoto.satoh) Date: Tue, 09 Aug 2011 12:55:16 +0900 (JST) Subject: [fess-user 512] Re: =?iso-2022-jp?b?c21iGyRCJEckTiUvJW0hPCVrJEskRCQkJEYbKEI=?= Message-ID: <1312862116.26091.makoto.satoh@ngb.co.jp> 佐藤です。 クロールがうまく行った際のログはこのようになっています。 2011-08-08 17:31:00,410 [Robot-20110808173053-1-2] INFO org.seasar.robot.helper.impl.LogHelperImpl - Crawling URL: smb://landisk/disk/proofs/test/08217200/201007080908314080_A463_____JTM-82172___12010054014_____AAA.HTM 2011-08-08 17:31:31,520 [main] INFO jp.sf.fess.helper.FileSystemIndexHelper - [EXEC TIME] crawling time: 33997ms 2011-08-08 17:31:57,743 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 3. The processing size is 3. The execution time is 16ms. 2011-08-08 17:31:57,772 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 0. The processing size is 0. The execution time is 1ms. 2011-08-08 17:31:57,772 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Sending 3 document to a server. 2011-08-08 17:31:57,806 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Sent 3 documents. The execution time is 34ms. 2011-08-08 17:31:57,806 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - [EXEC TIME] index update time: 79ms 2011-08-08 17:31:57,882 [main] INFO jp.sf.fess.helper.DataIndexHelper - No crawling target data. 2011-08-08 17:31:58,096 [main] INFO jp.sf.fess.exec.Crawler - [EXEC TIME] index optimize time: 208ms 2011-08-08 17:31:58,097 [main] INFO jp.sf.fess.exec.Crawler - Finished Crawler うまく行かなかった際はこうなりました。 ...... 2011-08-09 01:00:14,101 [Robot-20110809000009-1-3] INFO org.seasar.robot.helper.impl.LogHelperImpl - Crawling URL: smb://landisk/disk/proofs/hoge/04705800/ 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 0. The processing size is 0. The execution time is 0ms. 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Terminating indexUpdater. emptyListCount is over 60. 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - [EXEC TIME] index update time: 5784ms 2011-08-09 01:00:14,807 [main] INFO jp.sf.fess.helper.FileSystemIndexHelper - [EXEC TIME] crawling time: 3600895ms 2011-08-09 01:06:55,950 [main] INFO jp.sf.fess.exec.Crawler - Interrupted this crawling process: 20110809000009 Interruptedとあるので、何らかの理由で中断されたということでしょうか。 他の場所で調べたほうが良い部分などありますでしょうか？ From shinsuke ＠ yahoo.co.jp Tue Aug 9 13:25:01 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Tue, 9 Aug 2011 13:25:01 +0900 Subject: [fess-user 513] Re: =?iso-2022-jp?b?c21iGyRCJEckTiUvJW0hPCVrJEskRCQkJEYbKEI=?= In-Reply-To: <1312862116.26091.makoto.satoh@ngb.co.jp> References: <1312862116.26091.makoto.satoh@ngb.co.jp> Message-ID: 菅谷です。 情報をありがとうございます。 そのログから判断すると1時間たっても登録する ドキュメントが取得できなかったためにクロールを 中止しています。ディレクトリ数が多すぎて、 単に時間がかかっているのか、ハングアップしている ような状況なのかはログからは判断が難しい状態です。 あとは、CPUの状況とか、jconsoleとかでメモリ使用量とか スレッドダンプとかなどで、特定していくことになるかと 思います。 単に時間がかかっているだけであれば、待機時間を webapps/fess/WEB-INF/cmd/resources/app.dicon でmaxEmptyListCountを多くすることで待ち時間を 長くできます。60で1時間まちますので、120に すれば2時間くらい待つことになります。 60 よろしくお願いいたします。 shinsuke 2011年8月9日12:55 makoto.satoh : > 佐藤です。 > > クロールがうまく行った際のログはこのようになっています。 > > > 2011-08-08 17:31:00,410 [Robot-20110808173053-1-2] INFO org.seasar.robot.helper.impl.LogHelperImpl - Crawling URL: smb://landisk/disk/proofs/test/08217200/201007080908314080_A463_____JTM-82172___12010054014_____AAA.HTM > 2011-08-08 17:31:31,520 [main] INFO jp.sf.fess.helper.FileSystemIndexHelper - [EXEC TIME] crawling time: 33997ms > 2011-08-08 17:31:57,743 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 3. The processing size is 3. The execution time is 16ms. > 2011-08-08 17:31:57,772 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 0. The processing size is 0. The execution time is 1ms. > 2011-08-08 17:31:57,772 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Sending 3 document to a server. > 2011-08-08 17:31:57,806 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Sent 3 documents. The execution time is 34ms. > 2011-08-08 17:31:57,806 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - [EXEC TIME] index update time: 79ms > 2011-08-08 17:31:57,882 [main] INFO jp.sf.fess.helper.DataIndexHelper - No crawling target data. > 2011-08-08 17:31:58,096 [main] INFO jp.sf.fess.exec.Crawler - [EXEC TIME] index optimize time: 208ms > 2011-08-08 17:31:58,097 [main] INFO jp.sf.fess.exec.Crawler - Finished Crawler > > > うまく行かなかった際はこうなりました。 > > ...... > 2011-08-09 01:00:14,101 [Robot-20110809000009-1-3] INFO org.seasar.robot.helper.impl.LogHelperImpl - Crawling URL: smb://landisk/disk/proofs/hoge/04705800/ > 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - The number of a crawled document is 0. The processing size is 0. The execution time is 0ms. > 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - Terminating indexUpdater. emptyListCount is over 60. > 2011-08-09 01:00:14,492 [IndexUpdater] INFO jp.sf.fess.solr.IndexUpdater - [EXEC TIME] index update time: 5784ms > 2011-08-09 01:00:14,807 [main] INFO jp.sf.fess.helper.FileSystemIndexHelper - [EXEC TIME] crawling time: 3600895ms > 2011-08-09 01:06:55,950 [main] INFO jp.sf.fess.exec.Crawler - Interrupted this crawling process: 20110809000009 > > > Interruptedとあるので、何らかの理由で中断されたということでしょうか。 > > 他の場所で調べたほうが良い部分などありますでしょうか？ > > > _______________________________________________ > Fess-user mailing list > Fess-user ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/fess-user > From makoto.satoh ＠ ngb.co.jp Tue Aug 9 15:02:49 2011 From: makoto.satoh ＠ ngb.co.jp (makoto.satoh) Date: Tue, 09 Aug 2011 15:02:49 +0900 (JST) Subject: [fess-user 514] Re: =?iso-2022-jp?b?c21iGyRCJEckTiUvJW0hPCVrJEskRCQkJEYbKEI=?= Message-ID: <1312869769.7467.makoto.satoh@ngb.co.jp> 佐藤です。 ありがとうございました。 maxEmptyListCountを120にして待ってみたところ、HTMファイルのある階層の クロールが行われていることがfess_crawler.outで確認できました。 From shinsuke ＠ yahoo.co.jp Sat Aug 13 18:05:50 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Sat, 13 Aug 2011 18:05:50 +0900 Subject: [fess-user 515] Re: =?iso-2022-jp?b?VG9tY2F0NyAbJEIkSxsoQiBGZXNzNC4wIBskQiRyGyhC?= =?iso-2022-jp?b?GyRCO30kQyRGJCQkQyRGJF8kPzdvGyhC?= In-Reply-To: References: <9639269.124321312695620107.limolsys@nifty.com> Message-ID: 菅谷です． Fess 4 系では試していませんが，情報共有して おきます． webapps/fess/WEB-INF/classes/app.dicon で "http://localhost:8080/manager/text/" に変更することと conf/tomcat-users.xml で という感じでmanager-scriptに変更すると 動くと思います．(fe.tldはWEB-INF直下に置きます) よろしくお願いいたします． shinsuke 2011年8月7日20:37 Shinsuke Sugaya : > 菅谷です． > > 情報をありがとうございます． > fe.tld は対応したのですが，manager とかは > まだ確認してなかったので，対応していきたいと > 思います． > > shinsuke > > > 2011年8月7日14:40 : >> クニカタです。お世話になっております。 >> >> こちらの環境で、標記移行テストを昨日から >> やりはじめました。 >> >> 菅谷さんも、一昨日くらいからやっているようだったので、 >> ちょいとびっくりしました。 >> >> 菅谷さんtweet>自前のtldが見つからないと怒られたので >> >> これはこちらの環境でも再現しました。fe.tldですよね。 >> >> あと、こちらではTomcat7に同梱されている >> managerアプリを使ってしまっているのですが、 >> どうやらそれが、Tomcat6のものとは仕様が >> 変わっているようです。 >> >> Fess管理「システム設定」画面で >> Solrの稼動状況取得や、Solrアプリ(コンテキスト)の起動 >> などに、下記URLへアクセスするようなのですが、 >> localhost:8080/manager/list >> localhost:8080/manager/start〜〜〜 >> これらが、効かないようでした。 >> >> 以上、参考まで。 >> >> _______________________________________________ >> Fess-user mailing list >> Fess-user ＠ lists.sourceforge.jp >> http://lists.sourceforge.jp/mailman/listinfo/fess-user >> > From limolsys ＠ nifty.com Mon Aug 15 21:14:03 2011 From: limolsys ＠ nifty.com (limolsys ＠ nifty.com) Date: Mon, 15 Aug 2011 21:14:03 +0900 (JST) Subject: [fess-user 516] Re: =?iso-2022-jp?b?VG9tY2F0NyAbJEIkSxsoQiBGZXNzNC4wIBskQiRyGyhC?= =?iso-2022-jp?b?GyRCO30kQyRGJCQkQyRGJF8kPzdvGyhC?= In-Reply-To: References: <9639269.124321312695620107.limolsys@nifty.com> Message-ID: <18540113.275861313410443384.limolsys@nifty.com> クニカタです。毎度お世話になっております。 情報ありがとうございました。managerUrlはDIできたんですね。 今日やってみてうまくいきました！ ありがとうございました。 ----- Original Message ----- >Date: Sat, 13 Aug 2011 18:05:50 +0900 >From: Shinsuke Sugaya >To: fess-user ＠ lists.sourceforge.jp >Subject: [fess-user 515] Re: > Tomcat7 に Fess4.0 を持っていってみた件 > > >菅谷です． > >Fess 4 系では試していませんが，情報共有して >おきます． > >webapps/fess/WEB-INF/classes/app.dicon >で >"http://localhost:8080/manager/text/" >に変更することと >conf/tomcat-users.xml >で > > >という感じでmanager-scriptに変更すると >動くと思います．(fe.tldはWEB-INF直下に置きます) > >よろしくお願いいたします． > >shinsuke > >2011年8月7日20:37 Shinsuke Sugaya : >> 菅谷です． >> >> 情報をありがとうございます． >> fe.tld は対応したのですが，manager とかは >> まだ確認してなかったので，対応していきたいと >> 思います． >> >> shinsuke >> >> >> 2011年8月7日14:40 : >>> クニカタです。お世話になっております。 >>> >>> こちらの環境で、標記移行テストを昨日から >>> やりはじめました。 >>> >>> 菅谷さんも、一昨日くらいからやっているようだったので、 >>> ちょいとびっくりしました。 >>> >>> 菅谷さんtweet>自前のtldが見つからないと怒られたので >>> >>> これはこちらの環境でも再現しました。fe.tldですよね。 >>> >>> あと、こちらではTomcat7に同梱されている >>> managerアプリを使ってしまっているのですが、 >>> どうやらそれが、Tomcat6のものとは仕様が >>> 変わっているようです。 >>> >>> Fess管理「システム設定」画面で >>> Solrの稼動状況取得や、Solrアプリ(コンテキスト)の起動 >>> などに、下記URLへアクセスするようなのですが、 >>> localhost:8080/manager/list >>> localhost:8080/manager/start〜〜〜 >>> これらが、効かないようでした。 >>> >>> 以上、参考まで。 >>> >>> _______________________________________________ >>> Fess-user mailing list >>> Fess-user ＠ lists.sourceforge.jp >>> http://lists.sourceforge.jp/mailman/listinfo/fess-user >>> >> > >_______________________________________________ >Fess-user mailing list >Fess-user ＠ lists.sourceforge.jp >http://lists.sourceforge.jp/mailman/listinfo/fess-user From makoto.satoh ＠ ngb.co.jp Fri Aug 26 12:30:21 2011 From: makoto.satoh ＠ ngb.co.jp (makoto.satoh) Date: Fri, 26 Aug 2011 12:30:21 +0900 (JST) Subject: [fess-user 517] =?iso-2022-jp?b?SDIbJEIkTiVhJWIlaklUQi0kSyREJCQkRhsoQg==?= Message-ID: <1314329421.27988.makoto.satoh@ngb.co.jp> 佐藤と申します。 ファイルシステムをクロールしていますが、クロール対象が多いためか、 fess_crawler.outに下記のようなログを残してクロールが停止して しまいます。 http://fess.sourceforge.jp/ja/4.0/config/memory-config.html を参考にcrawlerJavaOptionsでは-Xmx4096mにしていますが、H2の使う メモリの大きさは別のところで設定するのでしょうか？ 2011-08-26 04:32:56,414 [main] WARN jp.sf.fess.exec.Crawler - Interrupted a crawl task. org.seasar.robot.dbflute.exception.SQLFailureException: Look! Read the message below. /* * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * The SQL failed to execute! [Advice] Please confirm the SQLException message. [SQLState] 90108 [ErrorCode] 90108 [SQLException] org.h2.jdbc.JdbcSQLException メモリが不足しています Out of memory. [90108-156] [ConditionBean] org.seasar.robot.db.cbean.UrlFilterCB [Display SQL] delete from URL_FILTER where ID in ( select dfloc.ID from URL_FILTER dfloc ) * * * * * * * * * */ at org.seasar.robot.dbflute.exception.handler.SQLExceptionHandler.throwSQLFailureException(SQLExceptionHandler.java:106) at org.seasar.robot.dbflute.exception.handler.SQLExceptionHandler.handleSQLException(SQLExceptionHandler.java:75) From shinsuke ＠ yahoo.co.jp Fri Aug 26 16:20:42 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Fri, 26 Aug 2011 16:20:42 +0900 Subject: [fess-user 518] Re: =?iso-2022-jp?b?SDIbJEIkTiVhJWIlaklUQi0kSyREJCQkRhsoQg==?= In-Reply-To: <1314329421.27988.makoto.satoh@ngb.co.jp> References: <1314329421.27988.makoto.satoh@ngb.co.jp> Message-ID: 菅谷です。 クロール用のデータベースのメモリ設定はそこで正しいです。 どのくらいのドキュメント数を対象にしていますでしょうか? H2 ですと、1つのクロール設定あたりで数万件がパフォーマンス的に 限度な感じがしています。ですので、それ以上を対象にする場合、 複数のクロール設定に分けるとかMySQLに変えるとか、 必要になるかと思います。 よろしくお願いいたします。 shinsuke 2011年8月26日12:30 makoto.satoh : > 佐藤と申します。 > > ファイルシステムをクロールしていますが、クロール対象が多いためか、 > fess_crawler.outに下記のようなログを残してクロールが停止して > しまいます。 > > http://fess.sourceforge.jp/ja/4.0/config/memory-config.html > を参考にcrawlerJavaOptionsでは-Xmx4096mにしていますが、H2の使う > メモリの大きさは別のところで設定するのでしょうか？ > > > 2011-08-26 04:32:56,414 [main] WARN jp.sf.fess.exec.Crawler - Interrupted a crawl task. > org.seasar.robot.dbflute.exception.SQLFailureException: Look! Read the message below. > /* * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * > The SQL failed to execute! > > [Advice] > Please confirm the SQLException message. > > [SQLState] > 90108 > > [ErrorCode] > 90108 > > [SQLException] > org.h2.jdbc.JdbcSQLException > メモリが不足しています > Out of memory. [90108-156] > > [ConditionBean] > org.seasar.robot.db.cbean.UrlFilterCB > > [Display SQL] > delete from URL_FILTER > where ID in ( > select dfloc.ID > from URL_FILTER dfloc > ) > * * * * * * * * * */ > at org.seasar.robot.dbflute.exception.handler.SQLExceptionHandler.throwSQLFailureException(SQLExceptionHandler.java:106) > at org.seasar.robot.dbflute.exception.handler.SQLExceptionHandler.handleSQLException(SQLExceptionHandler.java:75) > > _______________________________________________ > Fess-user mailing list > Fess-user ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/fess-user > From makoto.satoh ＠ ngb.co.jp Sat Aug 27 12:34:03 2011 From: makoto.satoh ＠ ngb.co.jp (makoto.satoh) Date: Sat, 27 Aug 2011 12:34:03 +0900 (JST) Subject: [fess-user 519] =?iso-2022-jp?b?GyRCJS8lbSE8JWskTiU5JTElOCVlITwla0BfRGobKEI=?= Message-ID: <1314416043.27396.makoto.satoh@ngb.co.jp> 佐藤と申します。 クロールの設定ごとに個別のスケジュールを設定することはできるでしょうか？ 現在ファイルシステムクロールの設定を３つ設定していますが、全て有効にして おくとクロールがメモリ不足で失敗します。すでに4GBも与えているのですが、 それほど使うものなのでしょうか？ １つずつ有効にしてクロールさせると正常にクロールしてくれます。 なので、クロール設定ごとに別のスケジュールができるか、あるいはAPI経由で クロールをスタートさせられれば、１つずつクロールが実行できると思うのですが、 そのような方法はありますでしょうか？ -- From shinsuke ＠ yahoo.co.jp Sat Aug 27 15:44:56 2011 From: shinsuke ＠ yahoo.co.jp (Shinsuke Sugaya) Date: Sat, 27 Aug 2011 15:44:56 +0900 Subject: [fess-user 520] Re: =?iso-2022-jp?b?GyRCJS8lbSE8JWskTiU5JTElOCVlITwla0BfRGobKEI=?= In-Reply-To: <1314416043.27396.makoto.satoh@ngb.co.jp> References: <1314416043.27396.makoto.satoh@ngb.co.jp> Message-ID: 菅谷です． > クロールの設定ごとに個別のスケジュールを設定することはできるでしょうか？ ウェブ上の設定では個別のスケジュールはできません． クロールは Tomcat から Java でプロセスを呼び起こして いるだけなので，それをバッチで構築すれば可能なのですが 手順を公開用にドキュメントにまとめられていません． > それほど使うものなのでしょうか？ クロールの設定によると思います． メモリの使用状況を確認してチューニングして 行くことになるかと思います． > １つずつ有効にしてクロールさせると正常にクロールしてくれます。 これで動くなら http://fess.sourceforge.jp/ja/4.0/admin/crawl-guide.html の同時実行のクロール設定数を1にすれば 良いような気もします． よろしくお願いいたします． shinsuke 2011年8月27日12:34 makoto.satoh : > 佐藤と申します。 > > クロールの設定ごとに個別のスケジュールを設定することはできるでしょうか？ > > 現在ファイルシステムクロールの設定を３つ設定していますが、全て有効にして > おくとクロールがメモリ不足で失敗します。すでに4GBも与えているのですが、 > それほど使うものなのでしょうか？ > > １つずつ有効にしてクロールさせると正常にクロールしてくれます。 > > なので、クロール設定ごとに別のスケジュールができるか、あるいはAPI経由で > クロールをスタートさせられれば、１つずつクロールが実行できると思うのですが、 > そのような方法はありますでしょうか？ > > -- > > _______________________________________________ > Fess-user mailing list > Fess-user ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/fess-user >