AndroidPlayストアからのデータの取得[終了]

AndroidPlayストアのデータを使用するアプリやウェブサイトを見たことがあります。たとえば、アプリやアプリのランキングが上位のサイトなどです。しかし、どのようにしてデータを取得できますか？どこから解析できますか？

必要な情報を取得するために使用できるAndroidマーケット向けの非公式のオープンソースAPIがあります。お役に立てれば。

免責事項：私は42mattersの出身で、すでにhttps://42matters.com/apiでこのデータを提供しています。お気軽にチェックするか、ご連絡ください。

lenikが述べたように、GPlayからいくつかのデータを取得するのにすでに役立つオープンソースライブラリがあります。自分で作成したい場合は、Google Playアプリのページを解析してみることができますが、次の点に注意する必要があります。

• 解析しようとしているURLがrobots.txtでブロックされていないことを確認してください-例：https：//play.google.com/robots.txt
• あなたがそれをあまり頻繁に行っていないことを確認してください、あなたがそれをやりすぎている場合、Googleはあなたを抑制し、潜在的にブラックリストに載せます。
• 正しいUser-Agentヘッダーを送信して、実際にボットであることを示します
• アプリのページが大きい-gzipを受け入れ、モバイル版をリクエストするようにしてください
• GPlay WebサイトはAPIではありません。解析してもかまわないため、時間の経過とともに変化します。変更を処理するようにしてください。たとえば、期待どおりの結果が得られることを確認するためのテストを行います。

したがって、1つのページのメタデータを取得することは、ページのhtmlをフェッチして適切に解析することです。ではJSoupあなたは試すことができます：

      HttpClient httpClient = HttpClientBuilder.create().build();
      HttpGet request = new HttpGet(crawlUrl);
      HttpResponse rsp = httpClient.execute(request);

      int statusCode = rsp.getStatusLine().getStatusCode();

      if (statusCode == 200) {
           String content = EntityUtils.toString(rsp.getEntity());    
           Document doc = Jsoup.parse(content);
           //parse content, whatever you need
           Element price = doc.select("[itemprop=price]").first();
      }      

その非常に単純なユースケースでは、始める必要があります。ただし、もっと面白いことをしたい瞬間、物事は複雑になります。

• ロボットでの検索は禁止されています。
• アプリのメタデータを最新の状態に保つことは困難です。220万を超えるアプリがあり、メタデータを毎日更新したい場合は、1日あたり2.2のリクエストがあり、1）すぐにブロックされ、2）多額の費用がかかります-1つのアプリが100kの場合、1日あたり220GBの悲観的なデータ転送
• 新しいアプリをどのように発見しますか
• 各国の価格設定、各言語の翻訳をどのように取得しますか

リストは続きます。これらすべてを自分で行いたくない場合は、42mattersAPIを検討できます。は、ルックアップと検索、上位のGoogleチャート、高度なクエリとフィルターをサポートする。そしてこれは35の言語と50か国以上に当てはまります。

[2]：

アプリをスクレイピングしてGooglePlayからデータを一覧表示する小さなNode.jsモジュールをコーディングしました：google-play-scraper

var gplay = require('google-play-scrapper');

gplay.List({
    category: gplay.category.GAME_ACTION,
    collection: gplay.collection.TOP_FREE,
    num: 2
  }).then(console.log);

結果：

 [ { url: 'https://play.google.com/store/apps/details?id=com.playappking.busrush',
    appId: 'com.playappking.busrush',
    title: 'Bus Rush',
    developer: 'Play App King',
    icon: 'https://lh3.googleusercontent.com/R6hmyJ6ls6wskk5hHFoW02yEyJpSG36il4JBkVf-Aojb1q4ZJ9nrGsx6lwsRtnTqfA=w340',
    score: 3.9,
    price: '0',
    free: false },
  { url: 'https://play.google.com/store/apps/details?id=com.yodo1.crossyroad',
    appId: 'com.yodo1.crossyroad',
    title: 'Crossy Road',
    developer: 'Yodo1 Games',
    icon: 'https://lh3.googleusercontent.com/doHqbSPNekdR694M-4rAu9P2B3V6ivff76fqItheZGJiN4NBw6TrxhIxCEpqgO3jKVg=w340',
    score: 4.5,
    price: '0',
    free: false } ]

Google Playストアはこのデータを提供していないため、サイトはデータをスクレイピングしているに違いありません。

ここでは、ダウンロードすることができますGoogleのChrome拡張機能ですあなたのレビュー：https://chrome.google.com/webstore/detail/my-play-store-reviews/ldggikfajgoedghjnflfafiiheagngoa?hl=en