機能改善: 日本語カテゴリの複数ページ巡回による日本語版フィード件数の拡充
- 日本語 (RAW) カテゴリページを純粋な日本語版候補が十分集まるまで2ページ目以降(最大10ページ)巡回するよう改良 - ryuugames_jp.xml の出力件数を最低10件以上(実績20件)へ拡充 - スラグ(eng-/mtl-)に基づく事前判定による効率的な巡回制御
This commit is contained in:
1 parent
9b5953fbca
commit
95e16189cc
1 file changed
+39
-3
@@ -351,8 +351,13 @@ internal class ryuugames
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
// 2. 日本語 (RAW) カテゴリページ(最新2ページ分)から URL を取得
|
// 2. 日本語 (RAW) カテゴリページを巡回して日本語作品を確実に10件以上収集
|
||||||
for (int p = 1; p <= 2; p++)
|
// (スラグに eng- や mtl- を含まない純粋な日本語作品候補が最低25件集まるまで、2ページ目以降も順次巡回)
|
||||||
|
const int targetJpCandidateCount = 25; // 記事パース後の純粋日本語版10件以上を確実に保証するための候補目標数
|
||||||
|
const int maxPages = 10; // 最大探索ページ数
|
||||||
|
int foundJpCandidates = 0;
|
||||||
|
|
||||||
|
for (int p = 1; p <= maxPages; p++)
|
||||||
{
|
{
|
||||||
try
|
try
|
||||||
{
|
{
|
||||||
@@ -364,15 +369,46 @@ internal class ryuugames
|
|||||||
if (doc != null)
|
if (doc != null)
|
||||||
{
|
{
|
||||||
var cards = doc.QuerySelectorAll(".catalog-grid a.catalog-card");
|
var cards = doc.QuerySelectorAll(".catalog-grid a.catalog-card");
|
||||||
|
if (cards.Length == 0)
|
||||||
|
{
|
||||||
|
break;
|
||||||
|
}
|
||||||
|
|
||||||
|
int pageJpCount = 0;
|
||||||
foreach (var card in cards)
|
foreach (var card in cards)
|
||||||
{
|
{
|
||||||
var href = card.GetAttribute("href");
|
var href = card.GetAttribute("href");
|
||||||
if (!string.IsNullOrWhiteSpace(href))
|
if (!string.IsNullOrWhiteSpace(href))
|
||||||
{
|
{
|
||||||
linkSet.Add(NormalizeUrl(href));
|
string normUrl = NormalizeUrl(href);
|
||||||
|
linkSet.Add(normUrl);
|
||||||
|
|
||||||
|
// URLスラグおよびタイトルから純粋な日本語版候補(eng-/mtl-を含まないもの)を判定
|
||||||
|
var uri = new Uri(normUrl);
|
||||||
|
var lastSeg = uri.Segments.LastOrDefault()?.Trim('/') ?? string.Empty;
|
||||||
|
var cardTitle = card.QuerySelector(".card-title")?.TextContent?.Trim() ?? string.Empty;
|
||||||
|
|
||||||
|
bool isTrans = lastSeg.StartsWith("eng-", StringComparison.OrdinalIgnoreCase) ||
|
||||||
|
lastSeg.StartsWith("mtl-", StringComparison.OrdinalIgnoreCase) ||
|
||||||
|
cardTitle.Contains("[ENG]", StringComparison.OrdinalIgnoreCase) ||
|
||||||
|
cardTitle.Contains("[MTL]", StringComparison.OrdinalIgnoreCase);
|
||||||
|
|
||||||
|
if (!isTrans)
|
||||||
|
{
|
||||||
|
pageJpCount++;
|
||||||
|
foundJpCandidates++;
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
LogManager.AddLog($"[情報] 【ryuugames】 日本語カテゴリ巡回 (page={p}): 本ページ日本語候補 {pageJpCount} 件, 累計 {foundJpCandidates} 件");
|
||||||
|
|
||||||
|
// 最低3ページは必ず巡回し、かつ目標候補数(25件以上)に達したら終了
|
||||||
|
if (p >= 3 && foundJpCandidates >= targetJpCandidateCount)
|
||||||
|
{
|
||||||
|
break;
|
||||||
|
}
|
||||||
|
}
|
||||||
}
|
}
|
||||||
catch (Exception ex)
|
catch (Exception ex)
|
||||||
{
|
{
|
||||||
|
|||||||
Reference in new issue
Block a user