おそらくこれで今もいけるとおもうけど 私はここ半年くらいこの方法をして スクレイピングのクローリングを回避してます クローリング方法がもう違うかもしんないけどね