オークションで希望の商品が売り出された時に自動検知するツールって作れる?

ネットでの反応

1: 2020/02/04(火) 18:17:44 ID:/+VSXGF4p
Excelでもできるもん?

引用元: プログラムできるやつちょっときてほしい

29: 2020/02/04(火) 18:31:56
Excelからでも要はスクレイピングできりゃいけるだろVBAで
Python+cronが1番早い
67: 2020/02/04(火) 20:59:55
最近はHTTP/2だのQUICだの出てきてるし
下手に自分で書くより良いライブラリ使ったほうが早いかもよ
20: 2020/02/04(火) 18:28:38 ID:/+VSXGF4p
どれがいいかな?RPAとかだと多分タイムスケジュール設定とかありそうだし24時間に一回実行で設定すれば良いよね
5: 2020/02/04(火) 18:20:03 ID:/+VSXGF4p
Excelではむり????????
なんで???最強って聞いたのに!!!
3: 2020/02/04(火) 18:18:44
ネットワークの知識さえあれば、今流行りのPythonで余裕
EXCELでのやり方は知らん
16: 2020/02/04(火) 18:26:27
それで安く買って転売やろうとしてるなら辞めとけ
損することになるから
17: 2020/02/04(火) 18:27:05 ID:/+VSXGF4p
>>16
それは絶対やらない
どうしてもほしい商品があるんだけ
19: 2020/02/04(火) 18:28:23
>>17
ヤフオクなら、キーワード設定しとけば新しい商品あったら通知してくれるけど
メルカリにもあると思う
21: 2020/02/04(火) 18:29:21 ID:/+VSXGF4p
>>19
え!?まじ!!!??
オークションサイト使わないから知らなかった!!
それで良いじゃん!!!!!!!!!!!!!
24: 2020/02/04(火) 18:29:40 ID:/+VSXGF4p
解決しました!!!!
ありがとう!!!!!!!!!!!!!
9: 2020/02/04(火) 18:22:55
その手のツールはサーバーに負荷掛かるから作ったらダメすぎる
オークション側がAPI配布してていいよ。って言うならアリだけど
この手のツールって初心者が欲しがるよね
10: 2020/02/04(火) 18:23:50
>>9
玄人の貴方はどうしてるんですか?
11: 2020/02/04(火) 18:24:32
>>9
世の中には白と黒しか無いのだ
12: 2020/02/04(火) 18:25:05 ID:/+VSXGF4p
>>9
あー確かにオークションサイトからしたらめっちゃウザいかも
なんかわからんけどRPAソフト?でオークションサイトに任意の商品を検索し続ける方法も考えたんだけど…
24時間ごとに一回の検索でもダメかな?
22: 2020/02/04(火) 18:29:36
方法としては可能だよ
サーバー側からサイトにアクセスして文字列を拾ってくる
何秒、何分に1回の割合で文字列を抽出する
あれば何らかの方法で知らせるってアプリケーション
でもそれって何秒や何分に1回サーバーにアクセスしているのはわかるよね?
一人ならいいけど業者間で何千人何万人とアクセスし始めたら
どれだけサーバーに無駄に負荷かけるかは容易にわかるよね?
基本情報とか資格取得してればわかるけど
この手のツールは基本作ったらいけない(相手側に迷惑がかかるのはNGに決まっている)
でも例外があってそういうの作っていいよっていうAPIを運営側が出しているならそれを使って作ってもいい事になってる
天気予報とかAPI配布してる
グーグルマップとかもAPI配布してくれてて使って技術者が開発できる仕組みになってる
そういうの初心者は知らないから
この手のツール欲しがる
転売業者なら普通に使ってんだろうけどね
27: 2020/02/04(火) 18:31:09 ID:/+VSXGF4p
>>22
いわゆるDOS攻撃的な事になっちゃうわけでしょ
それは本意じゃない!!!!!!
49: 2020/02/04(火) 19:03:40
ExcelのVBAでもInternetExplorerオブジェクト作ってやればできないことは無い
Excel無ければメモ帳でVBS書いてタスクスケジューラで動かしてやれば良い
47: 2020/02/04(火) 19:01:03
べつにwebスクレイピングはしてもいいでしょ
攻撃レベルのアクセスしなければ
53: 2020/02/04(火) 19:16:23
>>47
法律で明確に決まってる訳じゃ無いからな
13: 2020/02/04(火) 18:25:23
プログラムに夢見る典型的な奴
15: 2020/02/04(火) 18:26:09 ID:/+VSXGF4p
>>13
うるさいよ今必要なの!
43: 2020/02/04(火) 18:56:03
おそらくAPIとかって
それ専用のサーバーを作ってるんだと思う
リアルタイムコピーしといて
APIはこっちのサーバーにアクセスしてねって感じで
メインサーバーの方にはアクセスしないから負荷にならない
NEも面白そうだよね
18: 2020/02/04(火) 18:27:58
できる奴はみんなコッソリやっとるよ
32: 2020/02/04(火) 18:36:28
まあ作れない事はない
サーバーの知識とLL一つ使えれば余裕
俺は同じように為替のドル円の数値とか業者から勝手に抜いてるの作った事がある
34: 2020/02/04(火) 18:38:45
>>32
それこそAPIや専用サイトあるんですが…
36: 2020/02/04(火) 18:43:18
>>34
俺がやったのは10年以上前でAPIが有料だった
今は無料なのがあるのか
俺のトークンとか利用しないで手動で数値だけ取れるアプリを作った
更新すると業者のサイトの数値を抜いて画面に表示するって感じ
ネトゲしながら横で為替を監視するツール作った
37: 2020/02/04(火) 18:44:48
>>36
証券口座作ったらウェブ上で株価をリアルタイムで見れるようになるのは昔からだと思うけど、当時は無かったの?
40: 2020/02/04(火) 18:47:30
>>37
いちいち証券口座にアクセスしないといけないじゃん
それをネトゲやりながら横でアプリ起動しといて更新したら数値だけ取ってこれるの作った
当時はなかったな。今だとスマホで簡単に見れるけどな
もう10年前くらいだなリーマンショックの少し後2年くらいFXやってた
30: 2020/02/04(火) 18:32:46
サーバー管理者(NEっていうんだけど)
こういう無駄にアクセスしてきてるようなやつは
監視しててIPを遮断したりするんだよ
逆に言えば定期的に同じようにロボット(ボット)のように繰り返しアクセスしてくるようなのを
自動的に遮断するようなツールもあるんじゃないのかなぁと思ってる
31: 2020/02/04(火) 18:35:07 ID:/+VSXGF4p
>>30
ログはもちろん取ってると思うけど膨大なログからこいつは定時でアクセスしてるロボットだぞっていうのはどうやって拾って判断するんだろう
35: 2020/02/04(火) 18:40:23
>>31
監視アプリを起動させておく
ログを読み取り同じようにアクセスしてくる奴がいたとする
例えば1日中アクセスをしてくるIPとかね
そういうのを警告リストに入れるとかなら簡単に作れそう
あとはNEがリアルタイム監視して、こいつおかしいなと感じたら遮断したらいい
まあ遮断された側も数値がとれない場合IP変えてアクセスするってツールにすりゃいいだけなんだが
いたちごっこだな
39: 2020/02/04(火) 18:47:22 ID:/+VSXGF4p
>>35
ログを読み取り…の行がまず難しくない?
ヤフオクってめっちゃアクセス数多いでしょ?その中で何度も機械的にアクセスしてるやつをどうやって目視やツールで判断するのかがわからないんだ
41: 2020/02/04(火) 18:50:34
>>39
抽出したらいい
ログはトークンで表示できる
例えば、60分間にアクセスしてきた人が100万行あるとする
カウンターでも用意して同じIPのやつを抽出する
それを画面に表示する+監視IPファイルでも作って書き出しておけばいい
あとはそれをNE見れば一発だろう
なんでコイツ24時間1週間連続でアクセスしてきてんだ?とかすぐわかるだろ
というかそういうツールって作らずとも既にあると思うよ
俺が知らんから恥過ぎる
7: 2020/02/04(火) 18:21:18 ID:/+VSXGF4p
なんでPythonならできるの?なにが違うんだ
23: 2020/02/04(火) 18:29:36
24時間に一度ならヤフオクの機能であるくね?
33: 2020/02/04(火) 18:38:42
ヤフーは機械アクセス繰り返してると
読める文字を入力してくださいチェック画面になってアクセスできないようにするでしょ
26: 2020/02/04(火) 18:30:34
ExcelからAPI使えばいけるかもよ
28: 2020/02/04(火) 18:31:55 ID:/+VSXGF4p
>>26
もう大丈夫!!!!!!!!!
今日からアカウント作ります!!!!!!!!
50: 2020/02/04(火) 19:06:14
>>28
元々オークションに付いてる機能を知らなかったのか
便利だけど設定によってはうざいくらい来るよ