機能改善: 日本語カテゴリの複数ページ巡回による日本語版フィード件数の拡充
- 日本語 (RAW) カテゴリページを純粋な日本語版候補が十分集まるまで2ページ目以降(最大10ページ)巡回するよう改良 - ryuugames_jp.xml の出力件数を最低10件以上(実績20件)へ拡充 - スラグ(eng-/mtl-)に基づく事前判定による効率的な巡回制御
This commit is contained in:
1 parent
9b5953fbca
commit
95e16189cc
1 file changed
+39
-3
@@ -351,8 +351,13 @@ internal class ryuugames
|
||||
}
|
||||
}
|
||||
|
||||
// 2. 日本語 (RAW) カテゴリページ(最新2ページ分)から URL を取得
|
||||
for (int p = 1; p <= 2; p++)
|
||||
// 2. 日本語 (RAW) カテゴリページを巡回して日本語作品を確実に10件以上収集
|
||||
// (スラグに eng- や mtl- を含まない純粋な日本語作品候補が最低25件集まるまで、2ページ目以降も順次巡回)
|
||||
const int targetJpCandidateCount = 25; // 記事パース後の純粋日本語版10件以上を確実に保証するための候補目標数
|
||||
const int maxPages = 10; // 最大探索ページ数
|
||||
int foundJpCandidates = 0;
|
||||
|
||||
for (int p = 1; p <= maxPages; p++)
|
||||
{
|
||||
try
|
||||
{
|
||||
@@ -364,15 +369,46 @@ internal class ryuugames
|
||||
if (doc != null)
|
||||
{
|
||||
var cards = doc.QuerySelectorAll(".catalog-grid a.catalog-card");
|
||||
if (cards.Length == 0)
|
||||
{
|
||||
break;
|
||||
}
|
||||
|
||||
int pageJpCount = 0;
|
||||
foreach (var card in cards)
|
||||
{
|
||||
var href = card.GetAttribute("href");
|
||||
if (!string.IsNullOrWhiteSpace(href))
|
||||
{
|
||||
linkSet.Add(NormalizeUrl(href));
|
||||
string normUrl = NormalizeUrl(href);
|
||||
linkSet.Add(normUrl);
|
||||
|
||||
// URLスラグおよびタイトルから純粋な日本語版候補(eng-/mtl-を含まないもの)を判定
|
||||
var uri = new Uri(normUrl);
|
||||
var lastSeg = uri.Segments.LastOrDefault()?.Trim('/') ?? string.Empty;
|
||||
var cardTitle = card.QuerySelector(".card-title")?.TextContent?.Trim() ?? string.Empty;
|
||||
|
||||
bool isTrans = lastSeg.StartsWith("eng-", StringComparison.OrdinalIgnoreCase) ||
|
||||
lastSeg.StartsWith("mtl-", StringComparison.OrdinalIgnoreCase) ||
|
||||
cardTitle.Contains("[ENG]", StringComparison.OrdinalIgnoreCase) ||
|
||||
cardTitle.Contains("[MTL]", StringComparison.OrdinalIgnoreCase);
|
||||
|
||||
if (!isTrans)
|
||||
{
|
||||
pageJpCount++;
|
||||
foundJpCandidates++;
|
||||
}
|
||||
}
|
||||
}
|
||||
|
||||
LogManager.AddLog($"[情報] 【ryuugames】 日本語カテゴリ巡回 (page={p}): 本ページ日本語候補 {pageJpCount} 件, 累計 {foundJpCandidates} 件");
|
||||
|
||||
// 最低3ページは必ず巡回し、かつ目標候補数(25件以上)に達したら終了
|
||||
if (p >= 3 && foundJpCandidates >= targetJpCandidateCount)
|
||||
{
|
||||
break;
|
||||
}
|
||||
}
|
||||
}
|
||||
catch (Exception ex)
|
||||
{
|
||||
|
||||
Reference in new issue
Block a user