亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

用Python實(shí)現(xiàn)愛(ài)因斯坦棋AI:規(guī)則、搜索與調(diào)參指南

用Python實(shí)現(xiàn)愛(ài)因斯坦棋AI:規(guī)則、搜索與調(diào)參指南 簡(jiǎn)介棋類博弈是人工智能中經(jīng)典且易于上手的研究場(chǎng)景。從國(guó)際象棋到各類棋類變體博弈樹(shù)搜索與剪枝算法構(gòu)成了許多AI程序的核心。愛(ài)因斯坦棋是一種5×5小棋盤上的棋類變體規(guī)則簡(jiǎn)潔但戰(zhàn)術(shù)豐富非常適合作為棋類AI的入門實(shí)驗(yàn)場(chǎng)。圍繞這一棋盤可以用Python搭建一套完整可對(duì)弈的棋類引擎涵蓋走法生成、將軍判定、minimax搜索、alpha-beta剪枝、評(píng)估函數(shù)與迭代加深等關(guān)鍵技術(shù)。通過(guò)參數(shù)調(diào)優(yōu)與批量自我對(duì)弈驗(yàn)證開(kāi)發(fā)者能夠快速掌握搜索算法在具體博弈項(xiàng)目中的工程落地方法并規(guī)避規(guī)則版本差異、棋子阻擋判斷、GUI線程卡死等常見(jiàn)陷阱。從簡(jiǎn)單棋類入手理解AI決策原理是通往更復(fù)雜棋類與強(qiáng)化學(xué)習(xí)路徑的務(wù)實(shí)起點(diǎn)。1. 愛(ài)因斯坦棋一個(gè)比國(guó)際象棋更容易上手的AI實(shí)驗(yàn)場(chǎng)如果你手上有一塊5x5的棋盤和雙方各5枚棋子別急著擺國(guó)際象棋——試試愛(ài)因斯坦棋。這個(gè)常被稱為“小國(guó)際象棋”的變體規(guī)則是每方擁有王、后、車、象、馬各一枚沒(méi)有兵也沒(méi)有升變30秒就能講完規(guī)則但搜索空間和戰(zhàn)術(shù)組合又足以讓AI程序忙一陣子。我最早接觸它是在給一個(gè)教學(xué)項(xiàng)目找棋類引擎時(shí)標(biāo)準(zhǔn)國(guó)際象棋的走法生成和評(píng)估太成熟拿來(lái)練手沒(méi)有挑戰(zhàn)而愛(ài)因斯坦棋足夠新沒(méi)有現(xiàn)成滿大街的開(kāi)局庫(kù)反而適合把決策樹(shù)、剪枝、評(píng)估函數(shù)這些概念從頭跑一遍。這篇筆記會(huì)從規(guī)則說(shuō)清楚給出一套Python實(shí)現(xiàn)再把AI搜索的調(diào)參經(jīng)驗(yàn)和你容易踩的坑一次性攤開(kāi)。2. 愛(ài)因斯坦棋規(guī)則拆解為什么5x5棋盤是天然的AI測(cè)試床網(wǎng)上的愛(ài)因斯坦棋規(guī)則有不少版本有的用6x6棋盤有的加了兵和升變甚至還有人把它和“愛(ài)因斯坦謎題”混在一起。為了避免代碼對(duì)著一個(gè)永遠(yuǎn)跑不起來(lái)的黑匣子發(fā)呆我先把這套實(shí)現(xiàn)所采用的規(guī)則固定下來(lái)棋盤為5行5列雙方各持5枚棋子目標(biāo)是將死對(duì)方王。你可以在這個(gè)基礎(chǔ)上小幅調(diào)整后面我會(huì)明確指出哪個(gè)地方最容易受版本差異影響。2.1 棋盤、棋子與初始布局把物理規(guī)則變成數(shù)據(jù)字典棋盤坐標(biāo)用(row, col)表示白方初始在第0行黑方初始在第4行中間三行空置。雙方棋子從左到右分別是車、馬、象、后、王黑方從自己的視角看也是車、馬、象、后、王所以從鏡像角度看黑方的排列是王、后、象、馬、車。我把棋子的移動(dòng)能力先匯總成一張表方便后面寫(xiě)方向向量時(shí)對(duì)照棋子數(shù)量走法距離越子王1橫豎斜八個(gè)方向1格否后1橫豎斜八個(gè)方向任意格否車1橫豎四個(gè)方向任意格否象1斜向四個(gè)方向任意格否馬1L形橫走2豎走1或相反1步是為什么把王和后都放在5格的行里因?yàn)?列剛好放滿5枚棋子沒(méi)有兵的位置也就沒(méi)有過(guò)路兵、升變、王車易位這些“邊角規(guī)則”。對(duì)于AI程序來(lái)說(shuō)狀態(tài)空間比標(biāo)準(zhǔn)國(guó)際象棋小幾個(gè)數(shù)量級(jí)但棋子走法仍然有“阻擋”“僅馬可越子”的判定足夠練習(xí)走法生成器的健壯性。在代碼里我習(xí)慣用枚舉表示棋子類型而不是字符串因?yàn)槊杜e在debug時(shí)更直觀還能避免手寫(xiě)字符大小寫(xiě)帶來(lái)的混亂。下面這段是初始布局的最小表示# constants.py import enum WHITE, BLACK 0, 1 class Kind(enum.Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N def empty_board(): return [[None for _ in range(5)] for _ in range(5)] def initial_board(): board empty_board() # 白方 row 0黑方 row 4 top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] kind for c, kind in enumerate(bottom): board[4][c] kind return board這里把board直接存Kind枚舉空位存None。這個(gè)版本的代碼只記錄棋子種類還沒(méi)記錄顏色真實(shí)引擎里必須額外用一個(gè)數(shù)組或把顏色編進(jìn)棋子類。我特意先展示這種“半成品”是想說(shuō)明一個(gè)取舍棋盤只有25格用二維列表足夠快沒(méi)必要在入門階段上位棋盤bitboard。位棋盤在8x8棋盤上能大幅加速并行位運(yùn)算但在這里反而會(huì)增加調(diào)試成本尤其對(duì)于剛接觸棋類編程的人你會(huì)發(fā)現(xiàn)自己一整天都在算位掩碼。2.2 走法與勝負(fù)將軍、將死、還有“送將”違例大多數(shù)棋類走法生成都要分兩步走先生成“偽合法走法”再過(guò)濾掉會(huì)讓己方王被吃的走法。許多人一上來(lái)就寫(xiě)遞歸生成器卻忘了送將檢查最后AI會(huì)走出把自己的王送到對(duì)方嘴里的棋那感覺(jué)就像看了半天棋譜發(fā)現(xiàn)第一步就是錯(cuò)的。偽合法走法指的是“按照棋子移動(dòng)規(guī)則走完不越界且不落到己方棋子上的走法”。它不管走完之后自己王是否處于被攻擊狀態(tài)。比如王從角落走到中心如果對(duì)方車正好控制這一行這個(gè)走法在偽合法階段會(huì)被放進(jìn)列表但在第二階段的合法性過(guò)濾時(shí)必須刪掉。過(guò)濾邏輯很簡(jiǎn)單模擬每一步然后調(diào)用將軍判定函數(shù)如果己方王在對(duì)手攻擊范圍內(nèi)該走法不合法。這一步會(huì)反復(fù)執(zhí)行所以將軍判定一定要寫(xiě)得高效。判斷一個(gè)格子是否被某顏色棋子攻擊通常用反向掃描站在目標(biāo)格子上逆推是否有棋子能按自己的走法到達(dá)這里。棋盤小直接枚舉對(duì)手所有棋子的攻擊目標(biāo)也行。下面是一個(gè)更貼近代碼的思路def is_square_attacked(board, r, c, by_color): # 枚舉 by_color 的所有棋子檢查它們能否一步到達(dá) (r,c) # 注意馬不需要檢查中間阻擋車、象、后必須檢查路徑是否被堵 for each piece owned by by_color: if piece_can_reach(board, piece, r, c): return True return False將軍與將死的判定不能只用“能吃到王”來(lái)推。正確順序是先獲取當(dāng)前玩家的全部合法走法列表如果列表為空再檢查己方王是否正被攻擊——被攻擊就是將死否則就是無(wú)棋可動(dòng)。在國(guó)際象棋標(biāo)準(zhǔn)規(guī)則里無(wú)棋可動(dòng)判和棋但在愛(ài)因斯坦棋的某些流傳版本里無(wú)棋可動(dòng)直接判負(fù)。我建議在代碼里做成配置項(xiàng)因?yàn)槲乙?jiàn)過(guò)同一個(gè)項(xiàng)目里兩種寫(xiě)法都有人用最后在判負(fù)判和上吵了三天。3. 用 Python 寫(xiě)出可對(duì)弈的愛(ài)因斯坦棋走法生成與狀態(tài)管理現(xiàn)在進(jìn)入能跑的代碼。我采用一個(gè)自定義Piecedataclass來(lái)同時(shí)記錄種類和顏色比單純存枚舉更完整。棋盤狀態(tài)就用二維列表每格元素是Piece或None。這一章給出的代碼可以直接復(fù)用也可以作為你寫(xiě)其他小型棋類引擎的骨架。3.1 棋盤類設(shè)計(jì)從格子坐標(biāo)到合法走法列表先定義基礎(chǔ)類和棋盤初始化from dataclasses import dataclass from enum import Enum class Kind(Enum): KING K QUEEN Q ROOK R BISHOP B KNIGHT N WHITE, BLACK 0, 1 dataclass(frozenTrue) class Piece: kind: Kind color: int def __str__(self): return self.kind.value if self.color WHITE else self.kind.value.lower() class EinsteinBoard: def __init__(self): self.board self._initial_board() self.turn WHITE self.state_stack [] # 悔棋/搜索用 def _initial_board(self): board [[None for _ in range(5)] for _ in range(5)] top [Kind.ROOK, Kind.KNIGHT, Kind.BISHOP, Kind.QUEEN, Kind.KING] bottom [Kind.KING, Kind.QUEEN, Kind.BISHOP, Kind.KNIGHT, Kind.ROOK] for c, kind in enumerate(top): board[0][c] Piece(kind, WHITE) for c, kind in enumerate(bottom): board[4][c] Piece(kind, BLACK) return boardPiece是frozen dataclass保證哈希和比較都可靠后面在走法集合里做去重很方便。state_stack用來(lái)配合悔棋和AI搜索時(shí)的狀態(tài)回退這個(gè)設(shè)計(jì)在3.2里會(huì)展開(kāi)。核心的走法生成器按“方向向量最大步數(shù)”來(lái)組織。車、象、后能走任意格但中途遇到棋子就必須停馬直接跳到目標(biāo)格不受阻擋。我寫(xiě)了一個(gè)_attacks_from函數(shù)它會(huì)返回一個(gè)棋子能到達(dá)的所有格子def _attacks_from(self, r, c): piece self.board[r][c] if piece is None: return [] vectors { Kind.KING: [(1,0,1),(-1,0,1),(0,1,1),(0,-1,1), (1,1,1),(1,-1,1),(-1,1,1),(-1,-1,1)], Kind.QUEEN: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5), (1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.ROOK: [(1,0,5),(-1,0,5),(0,1,5),(0,-1,5)], Kind.BISHOP: [(1,1,5),(1,-1,5),(-1,1,5),(-1,-1,5)], Kind.KNIGHT: [(2,1,1),(2,-1,1),(-2,1,1),(-2,-1,1), (1,2,1),(1,-2,1),(-1,2,1),(-1,-2,1)], } result [] for dr, dc, max_step in vectors[piece.kind]: for step in range(1, max_step 1): nr, nc r dr * step, c dc * step if not (0 nr 5 and 0 nc 5): break target self.board[nr][nc] if target is None: result.append((nr, nc)) elif target.color ! piece.color: result.append((nr, nc)) break else: break return result這里有個(gè)細(xì)節(jié)馬的方向向量步長(zhǎng)為1但用了(2,1)這種二元組和max_step1的組合所以馬不會(huì)進(jìn)入“連續(xù)走多步”的路徑檢查。其他棋子的max_step設(shè)為5但棋盤只有5行所以range(1, 6)也會(huì)自然越界退出。這個(gè)實(shí)現(xiàn)簡(jiǎn)單缺點(diǎn)是每次都要重新構(gòu)造vectors字典如果你追求性能可以把這個(gè)字典提到類屬性或模塊常量里避免高頻搜索時(shí)反復(fù)分配。有了單子走法再匯總整個(gè)棋盤所有己方棋子的偽合法走法然后逐條模擬并過(guò)濾送將def get_legal_moves(self, color): pseudo [] for r in range(5): for c in range(5): piece self.board[r][c] if piece is None or piece.color ! color: continue for tr, tc in self._attacks_from(r, c): pseudo.append((r, c, tr, tc)) legal [] for move in pseudo: state self._snapshot() self._apply_move(*move) if not self.is_in_check(color): legal.append(move) self._restore(state) return legal_snapshot和_restore這對(duì)方法在3.2里實(shí)現(xiàn)作用是對(duì)整盤狀態(tài)做深拷貝。為什么要深拷貝因?yàn)槠灞P只有25格拷貝一次開(kāi)銷極小而且能避免增量回退時(shí)的邊界錯(cuò)誤——比如你吃掉對(duì)方馬之后悔棋要恢復(fù)如果你不拷貝就得額外保存“吃掉的棋子是什么”邏輯容易漏。3.2 落子、吃子與悔棋狀態(tài)棧和“悔棋”按鈕的實(shí)現(xiàn)def _snapshot(self): import copy return (copy.deepcopy(self.board), self.turn) def _restore(self, state): self.board, self.turn state def _apply_move(self, r, c, tr, tc): self.board[tr][tc] self.board[r][c] self.board[r][c] None self.turn BLACK if self.turn WHITE else WHITE def push_move(self, move): self.state_stack.append(self._snapshot()) self._apply_move(*move) def undo(self): 悔棋回退到上一個(gè)狀態(tài)并取出棧頂狀態(tài)。 if self.state_stack: self.board, self.turn self.state_stack.pop() return True return Falsepush_move在落子前快照再落子。undo用于GUI里的“悔棋”按鈕也用于AI搜索時(shí)的回退。你可能會(huì)擔(dān)心深拷貝會(huì)讓搜索變慢但實(shí)測(cè)在5x5棋盤上一次deepcopy大約幾微秒一次alpha_beta搜索幾千個(gè)節(jié)點(diǎn)總耗時(shí)不過(guò)幾十毫秒完全可以接受。如果你以后要移植到C或要做更深的搜索再改成“保存被吃棋子起點(diǎn)”的增量回退不遲。有一點(diǎn)要提醒如果你在搜索循環(huán)里用push_move和undo每次進(jìn)入子節(jié)點(diǎn)都要_snapshot那棧會(huì)越積越大。正確做法是直接用_apply_move_restore不要經(jīng)過(guò)state_stack。所以我在3.1的走法過(guò)濾里用的是_snapshot和_restore而不是push_move。搜索時(shí)的回退應(yīng)該手動(dòng)保存舊狀態(tài)而不是依賴undo因?yàn)閡ndo面向的是人機(jī)對(duì)弈的“悔棋?!眱商讞2荒芑煊谩?.3 命令行對(duì)弈最小可玩版本跑起來(lái)既然有了棋盤和走法先用命令行跑一個(gè)能雙人對(duì)戰(zhàn)的版本。輸入格式是r c tr tc從起點(diǎn)到終點(diǎn)q退出def print_board(board): for r in range(5): row [] for c in range(5): p board.board[r][c] row.append(str(p) if p else .) print( .join(row)) def main(): b EinsteinBoard() while True: print_board(b) print(Turn:, White if b.turn WHITE else Black) moves b.get_legal_moves(b.turn) if not moves: print(No legal moves. Game over.) break cmd input(enter move: r c tr tc (q to quit): ) if cmd.strip().lower() q: break try: r, c, tr, tc map(int, cmd.split()) except ValueError: print(bad input) continue move (r, c, tr, tc) if move not in moves: print(illegal move) continue b.push_move(move) opponent BLACK if b.turn WHITE else WHITE if b.is_in_check(opponent): print(Check!)這個(gè)主循環(huán)沒(méi)有任何AI但它能幫你驗(yàn)證規(guī)則自己跟自己下幾盤檢查有沒(méi)有走法漏生成有沒(méi)有把無(wú)棋可動(dòng)判成將死。命令行版本是后面加AI的基礎(chǔ)不要跳過(guò)。4. 給愛(ài)因斯坦棋裝上大腦minimax 搜索與 alpha-beta 剪枝的參數(shù)調(diào)優(yōu)黑白棋、五子棋、國(guó)際象棋的AI思路在愛(ài)因斯坦棋上完全通用核心就是帶剪枝的深度優(yōu)先搜索。不要一上來(lái)就上強(qiáng)化學(xué)習(xí)因?yàn)閻?ài)因斯坦棋是完美信息確定狀態(tài)搜索樹(shù)小到能用經(jīng)典方法解沒(méi)必要讓一局棋的訓(xùn)練時(shí)間長(zhǎng)得像練一個(gè)深度網(wǎng)絡(luò)。4.1 先算復(fù)雜度為什么要剪枝而不是直接上強(qiáng)化學(xué)習(xí)我粗略統(tǒng)計(jì)過(guò)空棋盤中間位置的車大約能走8格象能走4格左右后能走8到10格馬最多8格王3格。平均每個(gè)棋子大約能走6到8步每方5個(gè)棋子分支因子B大約在10到15之間。這是可觀的。如果做4層深度搜索B15時(shí)未剪枝的葉子節(jié)點(diǎn)是15^450625非常輕松6層深度是15^6≈1130萬(wàn)單層遍歷勉強(qiáng)能算但已經(jīng)不夠優(yōu)雅。alpha-beta剪枝在理想情況下能把復(fù)雜度從O(B^d)降到O(B^(d/2))也就是搜索同樣深度只需要大約sqrt(1130萬(wàn))≈3400個(gè)節(jié)點(diǎn)完全可以在毫秒級(jí)完成。因此先寫(xiě)minimax和alpha-beta是你投入產(chǎn)出比最高的方案。那么強(qiáng)化學(xué)習(xí)呢它的價(jià)值在于棋類狀態(tài)特征復(fù)雜、評(píng)估函數(shù)難以手工設(shè)計(jì)或者你需要一個(gè)能從自我對(duì)弈中自動(dòng)學(xué)習(xí)評(píng)估的網(wǎng)絡(luò)。但愛(ài)因斯坦棋棋盤小、棋子少一個(gè)幾十行的評(píng)估函數(shù)已經(jīng)夠用強(qiáng)化學(xué)習(xí)要處理獎(jiǎng)勵(lì)稀疏、回合長(zhǎng)、對(duì)局?jǐn)?shù)量大這些工程問(wèn)題不適合作為入門首選。4.2 最小可用的評(píng)估函數(shù)子力位置機(jī)動(dòng)性評(píng)估函數(shù)是AI風(fēng)格的“黑匣子”但我們可以先手工打開(kāi)它。最簡(jiǎn)單的評(píng)估用子力價(jià)值后9分、車5分、象3分、馬3分、王10000分因?yàn)橥醣怀粤擞螒蚪Y(jié)束。在此基礎(chǔ)上給靠近中心的棋子加一點(diǎn)點(diǎn)位置分因?yàn)橹行目刂屏Ω鼜?qiáng)。代碼長(zhǎng)這樣PIECE_VALUES { Kind.KING: 10000, Kind.QUEEN: 9, Kind.ROOK: 5, Kind.BISHOP: 3, Kind.KNIGHT: 3, } POSITION_BONUS [ [0, 1, 2, 1, 0], [1, 2, 3, 2, 1], [2, 3, 4, 3, 2], [1, 2, 3, 2, 1], [0, 1, 2, 1, 0], ] def evaluate(board): score 0 for r in range(5): for c in range(5): p board.board[r][c] if p is None: continue bonus POSITION_BONUS[r][c] if p.color WHITE else POSITION_BONUS[4 - r][4 - c] value PIECE_VALUES[p.kind] bonus * 0.1 score value if p.color WHITE else -value return score if board.turn WHITE else -scorebonus * 0.1是為了讓位置分遠(yuǎn)小于一個(gè)兵的價(jià)值不至于出現(xiàn)“為了搶中心而白送一個(gè)馬”的蠢事。實(shí)際上這個(gè)0.1本身就是可以調(diào)的參數(shù)我建議在0.05到0.3之間實(shí)驗(yàn)。更大的系數(shù)會(huì)讓AI更激進(jìn)地?fù)屨贾行牡菀缀鲆曌恿Π踩?。機(jī)動(dòng)性評(píng)估沒(méi)有寫(xiě)進(jìn)代碼因?yàn)橛?jì)算合法走法數(shù)量在搜索中已經(jīng)天然存在不需要額外統(tǒng)計(jì)。如果你發(fā)現(xiàn)AI總是走成僵局再考慮加上“己方合法走法數(shù)減去對(duì)方合法走法數(shù)”這一項(xiàng)。但記住評(píng)估函數(shù)不是越復(fù)雜越好加項(xiàng)越多越難調(diào)你先跑通0.1版再說(shuō)。4.3 迭代加深與超時(shí)控制三個(gè)必調(diào)參數(shù)正式對(duì)弈時(shí)你不能只固定搜索深度因?yàn)椴煌置鎻?fù)雜度不一樣。常見(jiàn)做法是迭代加深從深度1開(kāi)始逐步加深直到時(shí)間預(yù)算用完采用最近一次完整搜索的最佳走法。這樣你能精確控制在3秒內(nèi)返回一步棋而不是在最差局面里卡死。import time def alpha_beta(board, depth, alpha, beta, maximizing): moves board.get_legal_moves(board.turn) if depth 0 or not moves: return evaluate(board) if maximizing: value -float(inf) for move in moves: board._apply_move(*move) value max(value, alpha_beta(board, depth - 1, alpha, beta, False)) board._restore((board_copy_state, board.turn)) # 需要保存狀態(tài) alpha max(alpha, value) if alpha beta: break return value else: value float(inf) for move in moves: board._apply_move(*move) value min(value, alpha_beta(board, depth - 1, alpha, beta, True)) board._restore((board_copy_state, board.turn)) beta min(beta, value) if alpha beta: break return value上面這段代碼省略了_apply_move前后的狀態(tài)保存實(shí)際使用時(shí)你需要在每次進(jìn)入子節(jié)點(diǎn)前把board.board和board.turn存到臨時(shí)變量里。我在這里不展開(kāi)完整搜索類因?yàn)樗蜆?biāo)準(zhǔn)國(guó)際象棋AI完全一致。關(guān)鍵是下面的迭代加深循環(huán)def iterative_deepening(board, time_budget2.0, max_depth6): deadline time.time() time_budget best_move None depth 1 while depth max_depth and time.time() deadline: # 每層先保存一個(gè)候選最佳走法層結(jié)束才更新 current_best None best_value -float(inf) for move in board.get_legal_moves(board.turn): board.push_move(move) value alpha_beta(board, depth - 1, -float(inf), float(inf), False) board.undo() if value best_value: best_value value current_best move if current_best is not None: best_move current_best depth 1 return best_move這里三個(gè)必調(diào)參數(shù)是參數(shù)推薦起點(diǎn)作用調(diào)整方向max_depth6硬性最大深度上限防止時(shí)間預(yù)算失效時(shí)無(wú)限加深想棋力更強(qiáng)就加到8但要配合更快的走法生成time_budget2.0秒每次落子的時(shí)間預(yù)算實(shí)時(shí)對(duì)戰(zhàn)設(shè)1秒分析模式可設(shè)5秒evaluation_coeff0.1位置分系數(shù)影響評(píng)估函數(shù)的激進(jìn)度0.05保穩(wěn)0.3冒險(xiǎn)吃中心迭代加深還有一個(gè)隱藏好處如果你實(shí)現(xiàn)了“上一步搜索的最佳走法在開(kāi)局庫(kù)附近”它可以用在啟發(fā)排序里讓alpha-beta剪枝更容易觸發(fā)。不過(guò)在愛(ài)因斯坦棋上你先把這三個(gè)參數(shù)調(diào)好已經(jīng)能打敗絕大多數(shù)隨便下棋的人類玩家。5. 避坑指南愛(ài)因斯坦棋實(shí)現(xiàn)中的 5 個(gè)常見(jiàn)翻車現(xiàn)場(chǎng)這一章是血淚經(jīng)驗(yàn)。我確實(shí)在這些地方翻過(guò)車每次都要花至少一個(gè)晚上排查。按現(xiàn)象→原因→解決的方式寫(xiě)希望你不用走回頭路。5.1 規(guī)則版本不同兵/升變引發(fā)的連鎖反應(yīng)現(xiàn)象從網(wǎng)上下載的“愛(ài)因斯坦棋”代碼開(kāi)局第一排除了重子以外還有一排兵走幾步就報(bào)索引越界。原因愛(ài)因斯坦棋本身有多個(gè)變體有的版本是6x6棋盤加兵有的版本甚至允許兵升變。解決入手前先確認(rèn)規(guī)則版本。如果你手中的項(xiàng)目確實(shí)帶兵就在Kind里加PAWN并在_attacks_from里實(shí)現(xiàn)兵的單步前進(jìn)和斜吃同時(shí)處理升變。如果按我這套無(wú)兵規(guī)則遇到“對(duì)方底線出現(xiàn)第6個(gè)子”要直接報(bào)錯(cuò)防止靜默bug。5.2 重復(fù)局面與“無(wú)棋可動(dòng)”把和棋判成輸棋怎么辦現(xiàn)象AI走到只剩兩個(gè)王時(shí)程序提示“Game over”但明明合法走法沒(méi)了王也沒(méi)被將軍應(yīng)該是和棋。原因我在剛開(kāi)始寫(xiě)勝負(fù)判定時(shí)只檢查了legal_moves為空就判定對(duì)方贏了沒(méi)進(jìn)一步查王的攻擊狀態(tài)。解決把將死和無(wú)棋可動(dòng)分開(kāi)。先判斷l(xiāng)en(legal_moves)0再用is_in_check檢查當(dāng)前玩家王是否被攻擊。無(wú)棋可動(dòng)默認(rèn)判和但保留一個(gè)STALEMATE_IS_LOSS開(kāi)關(guān)應(yīng)對(duì)那些把“無(wú)棋可動(dòng)”當(dāng)輸棋的規(guī)則版本。5.3 馬能跳其他棋子不能穿人實(shí)現(xiàn)阻擋時(shí)的邊界錯(cuò)誤現(xiàn)象AI在殘局里經(jīng)常用車穿過(guò)自己的兵走到后方評(píng)估分看起來(lái)很高但按規(guī)則就是非法走法。原因_attacks_from里車、象、后沿方向逐格走但我的第一版沒(méi)有在碰到第一個(gè)棋子后break導(dǎo)致繼續(xù)掃描后方格子。馬則不需要檢查路徑所以馬的邏輯是獨(dú)立的。解決在偽合法走法生成時(shí)遇到第一個(gè)非空格就分支若是我方棋子停止若是對(duì)方棋子記錄格子并停止。馬的馬步直接跳過(guò)該檢查。一個(gè)快速自測(cè)是在5x5棋盤上把車圍在中心一圈棋子車應(yīng)該一個(gè)格都走不出去。5.4 GUI線程卡死遞歸搜索別放在渲染線程現(xiàn)象在Qt里點(diǎn)“AI下棋”按鈕后整個(gè)窗口變成“未響應(yīng)”點(diǎn)哪都沒(méi)反應(yīng)要等好幾秒才恢復(fù)。原因AI搜索的alpha_beta是同步遞歸主線程被占滿事件循環(huán)無(wú)法刷新。解決把搜索放到子線程用queue或者信號(hào)把結(jié)果傳回UI。更簡(jiǎn)單的做法是先用命令行版本驗(yàn)證AI再接GUI。我自己的習(xí)慣是讓AI計(jì)算線程每次只搜一個(gè)深度等迭代加深結(jié)束后回到主線程更新棋盤。如果不想引入多線程至少要在搜索循環(huán)中插入time.sleep(0)或QCoreApplication.processEvents()但這不是根治只是喘口氣。5.5 評(píng)估函數(shù)像玄學(xué)用自我對(duì)弈代替肉眼調(diào)參現(xiàn)象我把位置分系數(shù)從0.1改成0.3肉眼看了幾局覺(jué)得AI更兇了但和人下反倒輸多贏少。原因肉眼評(píng)估有巨大偏差位置分過(guò)高讓AI為了占中心狂送棋子。解決把兩個(gè)不同參數(shù)的AI放在一起自我對(duì)弈200局統(tǒng)計(jì)勝負(fù)和平局。勝率差異不到5%時(shí)基本可以認(rèn)為是噪聲跑滿200局再看通常能找到趨勢(shì)。不要只調(diào)一個(gè)參數(shù)就下結(jié)論至少要用固定對(duì)手和固定隨機(jī)種子跑批量對(duì)局。這也是我后來(lái)養(yǎng)成的習(xí)慣任何評(píng)估函數(shù)的改動(dòng)都要用--games參數(shù)跑批量測(cè)試不憑“感覺(jué)還不錯(cuò)”上線。6. 進(jìn)階玩法從“會(huì)下”到“下得好”的驗(yàn)證閉環(huán)現(xiàn)在你已經(jīng)有一個(gè)能下棋、能搜索、能悔棋的程序。想讓它更強(qiáng)不用急著換強(qiáng)化學(xué)習(xí)框架先把這三個(gè)進(jìn)階動(dòng)作做扎實(shí)。6.1 用自我對(duì)弈生成離線數(shù)據(jù)反哺評(píng)估函數(shù)把兩個(gè)不同評(píng)估參數(shù)的AI寫(xiě)進(jìn)同一個(gè)腳本里讓它們自動(dòng)對(duì)弈200局記錄每局的走法序列、棋子被吃情況和最終結(jié)果。你不需要人工標(biāo)注因?yàn)閯儇?fù)天然就是標(biāo)簽。用這些對(duì)局可以回歸出“哪種子力比值更優(yōu)”的經(jīng)驗(yàn)值甚至可以訓(xùn)練一個(gè)簡(jiǎn)單的線性評(píng)估模型替代原來(lái)拍腦袋的PIECE_VALUES。6.2 做個(gè)開(kāi)局庫(kù)前5步不再“天馬行空”棋盤這么小AI搜到第4層時(shí)已經(jīng)能穩(wěn)定判斷前幾步。但為了節(jié)省時(shí)間預(yù)算你可以用高深度AI離線生成前5步的最優(yōu)走法存成一個(gè)字典鍵是“棋盤狀態(tài)”值是好走法。對(duì)局時(shí)前5步直接查表把時(shí)間預(yù)算留給中殘局。我自己試過(guò)用8層搜索跑一晚上能覆蓋絕大多數(shù)前期變體線上AI前5步的思考時(shí)間直接降到0。6.3 驗(yàn)證方法讓兩個(gè)AI打一場(chǎng)用勝率和平均回合數(shù)說(shuō)話不要再用“哪一步讓我感覺(jué)厲害”來(lái)驗(yàn)證。正確做法是用同一套引擎、不同參數(shù)跑200局記錄勝率、平均回合數(shù)、每步平均耗時(shí)。表格比感覺(jué)可靠得多版本勝率平均回合平均耗時(shí)v0.1 位置系數(shù)0.158%42.31.8sv0.2 位置系數(shù)0.342%38.71.9s這組數(shù)據(jù)一眼就能看出位置系數(shù)0.1更穩(wěn)。那怎么選我會(huì)把勝率作為第一指標(biāo)平均回合數(shù)作為調(diào)優(yōu)參考因?yàn)榭焖仝A棋不一定意味著棋力強(qiáng)。慢慢養(yǎng)成這個(gè)習(xí)慣后你會(huì)發(fā)現(xiàn)所謂“棋感”變成了可重復(fù)的實(shí)驗(yàn)而不是玄學(xué)。希望這套從規(guī)則到驗(yàn)證的流程能讓你在下一個(gè)棋類項(xiàng)目里少花幾個(gè)通宵。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美性性性| 亚洲AV色图一区| 天天综合网站| 亚洲色棕合| 男女做爰猛烈动高潮A片免费应用 少妇厨房愉情理伦片bd在线观看 不卡中文字幕aⅴ在线 | 日韩在线97| 超碰三级秋霞| 久久五月天婷婷| 啊啊啊啊啊啊啊啊啊在线观看| 久久只有精品| 国产高清MV操逼视频| 国产后入精品| 亚洲欧美综合网站| 日韩性爱小视频| 狼人综合婷婷激情四射 | 97超碰香蕉| 伊人久久大香大香线蕉中文| 午夜啊啊| 欧美白嫩在线放| 夜草网站| 欧美激情精品久久久久久| 成人免费在线网站| 后入 亚洲 美女 射| 欧美精品宗合| 日韩欧美丝袜诱惑| 国产久久久久久| 亚洲五月婷| 外国免费性情大片| 91久久久久久| 国产精品久久aV| 女人天堂AV五区在线| 一本色道综合久久欧美| 日韩性爱一级片| 国产四虎在线| 欧美日韩激情无码专区| 视频二区美腿制服人妻欧美| 嗯嗯啊操我| 亚洲天堂五月天国产| 啊灬啊灬啊灬啊灬高潮奶出了免费视| 蜜臀av一区二区三区免费观看| 日本加勒比无码专区| 在线播放中文字幕| 国产乱伦一二三区| 色九九九九| 青青青国产| 亚洲第一页第二页激情| 色综合20p| 六十路日本| 美女被啪到深处抽搐视频| 国产美女激情| 精品超碰国产| 天天激情干| 人妻欧美| 超碰色综合| 白嫩妹子国产骚| 国产av青草| 操www| 久久久久夜夜夜夜| 青草青青久久久久久国产| 成年人三级黄色片视频| 99亚洲精品| 亚洲性爱乱操x| 亚洲另类综合欧美| 国产精品老熟女一区二区| 91美女网站| 极品少妇久久久久| 成人精品视频一区二区| 玖玖婷婷五月天| 99这里只有精品国产| 99精品国产户外露出| 一本久久久精品| 天天弄天天操| 日韩在线视频1234| 人妻偷拍一区二区三区| 在线不欧美| 婷婷五月天色网| 999 久久久| 性爱AV天堂| 久久深夜无码| 97国产精品久久久久 | 亚洲情色图片区| 99热成人| 国产亚洲精品av一区| 91久热| 神马久久久久久久久| 中文字幕日韩人妻视频一区二区三区| 欧美图片色综合| 91色婷婷综合久久中文字幕二区| 中文字幕一区av| 中亚精品极乱| 欧美色棕合| 中文字幕一区二区三区人妻少妇在线| 国内精品伊人久久久久影院会| 人妻99p| 中文字幕 人妻不满 在线视频| 婷婷色影院| 日韩女模中文造逼| 亚洲囯产精品女人久久久| 日本高清视频xxxx| 无码直播久久久| 日韩精品碰碰| 国产欧美一级在线观看| 国产一二三福利视频网| 91色综合色| 日操粉逼逼| 日本丝袜人妻内射| 97操| 欧美日本中字另类在线| 国产综合日韩伦理| 麻豆AV一区二区天美传媒| 天综合网| 四虎视频在线观看| 国产精品自在线发布| 91丨九色丨国产丨人妻在线| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 久草毛片| 日韩熟女精一区二区三区不卡| 这里都是精品| 97网址97| 国产精品一区二区三区在线| 国产嫩草精品A88AV| 欧亚日韩三区| 97精品中文字幕| 久久久工口| 超碰亚洲97| 丰满少妇人妻久久久久久| 国产青一二三| 新精精品久久精品| 啪啪啪东京| 飘花国产午夜精品不卡| 啪啪视频免费在线观看| 欧美性生活男人的天堂| 91色人妻| 久久久久久国产精品免费网站 | 视频在线97| 97在线视频观看| 国产精品国产自产高清AV| 亚洲AV性爱电影| 色综合九九| 69精品少妇一区二区三区蜜桃| 99黄页网站| 国产日韩美女小穴视频网站不卡| 综合av社区| 欧美黄片欧美黄片xxx| 色色五月天激情| 大香蕉久| 日日日大屁股骚女人精品| 亚洲蜜臀视频精品久久| 久久禁| 手机在线A片| 中文字幕一区 二区三四五 区日 日骚 | 日韩BBN| 99老司机精品视频在线观看| 啊啊啊好湿国产一二| 俺去俺来也在线www| 超碰日本97美女人妻人人玩人人爱| 国产中文字幕在线| 亚洲欧美高清无码| 人人扣人人操| 大香蕉琪琪日本女优不卡| 婷婷20月天青娱乐| 久久AV无码网址| 天美麻花大全视频| 超碰97在线 欧美 国产| 加勒比在线视频一区二区三区| 日韩av免费一级电影| 韩国黄片aaaa| n1038 一二三区| 蜜臀久久99精品久久久久| 亚洲精品成人动漫在线| 夫妻四区五区六区| 九色 人妻 大香蕉| 亚洲另类春色| 干我久操| 天美传媒av在线| 中文字幕福利视频一区二区三区在线观看| 盗摄女人妻在线| 91最新综合| 97色操| 人、人、摸,人、人、草| 欧美黑人猛交春色影视大全| 国产美女自拍AV| 成功精品影院| 国产高清成人mv在线观看| 久久激情网| 97精品综合久久网| 春色91| 男人的天堂.com| 蜜臀久久99精品久久久久久婷婷| 欧美黄片视频在线观看免费| 亚洲人综合19| 天天欧美色| 九九九精品成人免费视频小说| 1000午夜黄色| 丁香五月影院| 97在线免费看视频| 性色av婷婷久久一区二区点复制| 美女91| 久久九九一区二区三区成人| 91高清无码下载| 久久久熟女一区| av一区二区三区 中文| 加勒比少妇AV婷婷六月天超碰超碰| 国产欧美亚洲精品a第2页| 91亚洲图片| 95人妻爽爽人人做人人澡| 久久线上视频免费看| 丁香婷婷大香蕉| 超碰97人妻| 性色中出| 特色a在线上| 91成人在线| 中国亚洲呦女专区| 久久免费少妇| 毛片99-全集电影手机免费观看完整-B029AV| 国产av又色又爽又黄| 亚州久久9| 丰满人妻av一区二区三区| 色香综合| 波多野结衣一级视频| 亚洲男人天堂2012| 天堂69亚洲精品中文字| 夜夜嗨一区二区三区直播内容| 澳门成人网站久国产日韩| 日韩午夜精品一区二区三区电影| 999岛国大片| 综合伊人激情| 成人精品在线免费视频| 嗯嗯不要 视频| 一区二区 电影 亚洲| 色色热| 91亚洲人电影| 91亚洲精品青草| 色999五月色| 很黄很色的视频在线观看| 97资源久久| 啊啊啊啊啊好舒服视频| 殴洲老熟女| http://qxhbdz.com| 人妻熟女一区二区| 免费的av网| 91在线美女| 黄色污污污污污污网站| 青青草日逼视频| 操逼逼无码| 国产一级不卡在线观看| 成人a级高清视频在线观看| www.男人的天堂| 九九热re99re6在线精品| 99操逼| 久久啊啊| 中文字幕,人妻,日韩| 99re在线| 亚洲无码免费看| 岛国毛片手机在线观看| 日本午夜精品理论片A级APP发布| 无码99| 天天综合网AV91| 97频视在线| 久久九九热| 麻豆91熟妇人妻中文字幕茄子| 最新亚洲黄色免费电影 | 尹人免费观看视频在线| 九九精品99| 人人操人人干网页| 国产自产一区视频在线| 激情小说五月天| 日日干天天干夜夜爽| 91午夜无码| 丁香色五月 97干| 黑丝少妇在线观看| 蜜臀人妻少妇久久在线观看| 日1区2区3区2020| 久偷拍| 天天拍夜夜| 成人性爱AV在线免费观看| 国产精品视频一区二区三区八戒| 久久超碰亚洲人| 校园春色五月天| 女人喷水视频在线观看| 日本熟妇熟色97一本在线观看| 国桃视频产巨乳精品一区二区在线| 精品天堂| www.99热| 熟女熟妇一区二区三四区| 国产一区在线观看无码AV| 无码色| 亚洲性天堂| 国内精品嫩模A∨私拍小视频| www.色综合| 国产第11页| 欧美高清无码免费视频高清版| 激激五月| 日本熟女免费視颖| 国产做?爰片久久毛片?片美国| 久久综合18p| 97色碰| 91熟女少妇| 午夜九九| 亚洲高清国产理伦片| 日韩影片中文字幕一区二区三区| 91久久国产精品| 色色色天美视频| 男人的天堂久久狠| 中国东北熟女老太婆内谢| 亚洲熟妇无码一区二区三区| 亚洲综合20p| 黄色av一区二区在线| 国产高清1234区| 精品久久97观看在线视频| 粉嫩绯色AV一区二区在线| 九久9热| 日韩人成网站在线播放| 中国韩国明星一极片一区乱码毛片人妻熟女一区二区三区 | www国产天美久久久| 蜜桃色色网站视频三区| 美女裸体无遮挡永久免费观看网站| 91操操| 天天色图| 天天天干977| 日韩精品在线放| 欧州激情视频在线一区二区| 这里都是精品在线观看| 久久成年片色大黄全免费网站| 蜜臀在线免费观看在线免费观看| 欧亚成人在线视频| 火箭成精品视频884必出精品| 精品999日本| 亚欧成人综合影院| 极品少妇久久久久| 97精品一二区| 夜夜骑夜夜操| 你懂得91| 超碰成人人人爽人人爽| 久久久久久久久久久久久久久性生活视频 | 射丝袜高跟鞋99| 亚洲天堂人妻熟妇视频| 色噜噜国产精品视频一区二区| x97av| 能在线播放的国产三级| 中文字幕免费在线观看| 黑人中出21连凳花野真衣| 草草网站影院白丝内射| 91精品人| 精品999999| 蜜桃久久一区| 五十路熟女工口| 天天干少妇| 久久久久人妻二区精品叶可怜| 91色色网站| 另类欧美色| 精品免费成人久久| 91oumei| 99热97| 国产13区| 91无码人妻| 91偷拍欧美亚洲| 麻豆天美电影一区二区| 99精品在线| 亚洲日本韩国在线| 日本精品一级二级三级| 人人摸人人入| 大香蕉综合网| 青青操国产夫妻| 97天天做| 美女91av| 屁股久久久久久| 9色国产精品一区粉嫩 | 国产精品色片一区二区| 国产超碰| 在线天堂999| 久久m| 中文字幕无码不卡啪啪| 亚洲综合性网址| 裸体美女久久久| 久久精品91| 国产人妻精品一区二区三区秋霞 | 日本污ww视频网站| 色婷婷香蕉| 亚洲超碰在线| 欧美激情亚洲色图| 在线看的av| 人人插人人摸人人| 18禁的网站在线| 色婷婷久久| 亚洲精品视频在线播放| 激情av| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 天天内射| 91色综合| 精品午夜福利国产一区二区在线观看 | 久久久婷| 国产综合久| 亚洲欧美首页| 欧美日韩操逼动图| 婷婷深爱五月| 亚洲狼狼干综合1| 国产日韩中文字幕欧美| 国产精品不卡一区二区三区av| 日本女人操逼| 老熟女区| 男女一进一出视频久久| 欧美一区二区观看在线| 久久綜合很很很| 精品人妻中文字幕高清| 8x福利精品第一福利视频导航| 国产久久一区二区午夜| 夜夜福利| av网站免费看| 亚洲精品丝袜-不卡成人免费……| 久久婷婷苹果| 欧美v亚洲v日韩v最新在线二区| 国产丝袜美女诱惑| 夜夜做夜夜爽精品视频| 伊人网青青| 九九热九九热| 外站AV在线| 中文字幕成人理论在线| 欧美在线|亚洲| 国产人妻天天干精品| 欧美丝袜91| 亚洲欧美日韩综合在线尤物 | 精品999999| 99热精品在线播放| 男人精品天堂一区| 欧美极品| 99福利社| 久99久视频精选| 丁香九月婷婷| 啊啊啊啊在线观看网址| 黑人猛交| 亚洲色图 图片| 欧美性爱视频免费一区一A | 天天操天天7| 欧美αv.com| 99热线麻豆 | 97福利视频| 欧美性第一页| 成人十八禁日韩欧美一二三| 一区二区三区亚洲| 99这里有精品视频| 91少妇人妻| 九九九久千久久激情蜜桃在线看 | 久久精品国产72国产精品福利| 呻吟 欧美 日本 中出| 九九黄色网| 国产成人在线观看网址| 不卡在线一区,精品一区二区三区中| 久久国产AⅤ| 欧美综合 站| 久久久夜夜嗨免费视频| 国产强奸乱伦无码视频| 国产久久日| 91GD.COM| 熟女五十路一区二区三| 97人人色| 青娱乐手机日韩在线视频| 久久美女国产| 亚洲日本天堂| 91精品国久久久久久无码| 偷窥自拍亚洲天堂网爆| 日韩免费三级黄片电影| 人爽不卡视频| 性欧美| 人人澡人人澡人人| 大香蕉手机在线视频| 国产九九九九九九九九| 在线免费观看高清无码视频| 天美av在线| 素颜老阿姨乱情色| 丁香五月成人| 丝袜大香蕉| 久久‘黄片视频| 国产情侣自拍在线播放| 日本黄色精品专区网站| 中文字幕欧美精品亚洲日韩蜜臀| 人乳av| 蜜臀久久久国产| 欧美精品另类人妖xxxx| 99这里有精品| 97资源超碰| www.狠狠| 超碰国产情侣自拍网| 人人喜人人妻| 91无码中出人妻视频| ..日韩av毛片精品久久久| 五月天玖玖资源站| wwwxxx日本爽| 久操网址| 国产超碰在线| 户外裸露刺激视频第一区| 人人妻人人狠人人| 思思热久久成人| 日本五十路熟女一区二区| 又粗又长又爽在线观看| 高清一区AV无码| 人人操人人插 - 百度 - 百度| 日韩一区二区精彩视频| 最新av网站在线观看| 国产亚洲精品无码三区| 夜嗨影院| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 91精品人妻偷情| 性生活性生大爱77AV国产| 久草成人影片| 亚洲天天操| 性videos欧美熟妇hdx| 国产精品69人妻无码久久久| 中文字幕高清20页视频| 91中文精品日韩欧美在线| 麻豆黄色五月天| 最新中文字幕在线亚洲| 亚洲一区二区麻豆影院| 欧美日综合| 9久综合网| 亚洲日本韩国极品一区二区| 日本高清视频在线观看黄已三辽| 蜜乳av一区二区| 婷婷综合| 97视频免费在线| 最新av中文字幕高清| 人妻-91porn| 女同性恋一区二区三区精品视频| 久久香蕉国产线看观看亚洲女人| 中文字幕av乱伦| 不卡啪啪视频| 黄站在线免费观看| 久久露脸国产老熟女| 熟女天天干| 啊啊啊啊无码| 顶级丝袜熟女一区二区三区 | 国偷自 一区| 欧美日韩小说| 亚洲 欧美日韩 另类| 日韩pv中文| 亚洲中文字幕久久无码精品| 亚洲,日韩,欧美,成人播放 | 91人妻做a观看视频| 中文字幕日韩人妻视频| 伊人久久青青草| 999热日韩精品| 青青久久手机线视频| 97干在线看| 欧美极品| 天天综合色| K8久久久久| 亚洲超碰在线| 熟女天天干| 欧美呦呦性爱| 免费看污网址| 亚洲国产成人精品久久久国产成人一区二区 | 国产精品久久久视频| 试看福利| 大香蕉AV在线| 亚洲麻豆av一区二区| www.99色| 岛国在线免费视频| 天天插天天干| 亚洲伊人成综合成人网| 测评在线观看AV| 毛片视频白嫩| 老司机天天操| 蜜桃色院一区久久| 国产一级内射高清视频 | 中文字幕一区二区三区字幕| 成人日韩中文字幕| 黄色无码高清黄色无码网站| 日韩不卡网操逼中文字幕日韩| 一区二区三区免费岛国片| 噜噜噜亚洲精| 九一精品牛牛一区二区| 国产精品美女在线一区| 久久人妻少妇| 欧美国产日韩清纯唯美| 国模无码人体一区二区三| 国产成人精品午夜福利| 欧美色图亚州激情| 免费αV在线视频| 欧美国产有色电影| 亚洲 欧美日韩 另类| 亚州欧美色图| 91精品人妻五十路| 理论久久婷婷网 8| 人人看人人插| 久久在肏| 高清无码学生妹高潮| 亚洲欧美精品91| 天天弄天天操| 97爱爱| 一级AAA片一区二区三区| 福利大香蕉| 精品无码一二三四区| 国产综合网站在线播放| 久久黄片国产一区二区| 欧美黑人与女人91| 不卡九肏| 欧美亚洲20p| 少妇3P性爱自拍| 久久黄片国产一区二区| 久久精品福利影院| 久久99999| 极品丝袜无码| 久久九七| 国产外初女出血视频| 人人操人人精品影片| 性性久久| 天天天堂影视日韩亚洲91| 国产精品 亚洲情色| 亚洲性爱高潮影院| 夜间福利片1000无码| 亚洲 日本 国产 综合| 精品无码久久久久久久杏吧| 我想要 啊 啊 啊| 成人日本片久久久蜜桃| 久久m| 另类图片五月天| 东北老女人的激情视频| 二对二中文字幕。| 丰满人妻一区二区三区| 99爱在线视频| 97色碰| 国产 亚洲 丝袜 制服| 91人妻素女| 夜夜操狠狠操| 91色爽欧美| 国产精品一二三免费网站| 25国产精品免费观看| 天美传媒av 在线| 欧美性区| 99国产精品自在自在| 日韩欧美中文字亚洲慕| 亚洲精品蜜桃久久久| 午夜精品久久一区二区| 日本狂喷奶水在线播放212| 老司机射| 在线观看视频91| 影音资源男人日韩| 少妇无码999| 丰满人妻一区二区三区性色| 国产一级黄色片在线观看 | 亚洲中文字幕av | 粉嫩av在线| 操逼啊啊啊91| 欧美中文字幕男人天堂久久精品| 97在线公开视频| 无遮挡又黄又刺激的视频| 国产精品爽爽va在线观看98| 国产九九久久久精品| 夜夜高潮夜夜爽高清视频一 | 国产区91柔拿会所技师| 九九九九热| 久久精品一区二区一8| h无码动漫在线观看| 精品网站9999| 资源新线在线天堂| 婷婷五月天激情四射| 日本性爱网址| 在线v中文字幕一区二区三区| 日本欧美色| 日本色日夜干| 91N欧美| 久久香蕉国产线看观看亚洲女人| 九九黄色视频在线观看| 一区二区国产视频在线观看| 久思思热视频在线观看| 精品久一区免费| 人妻精品一区二区三区| 成人青青草原伊人| se吧提供91精品国产91久久久久久| 尻女朋友一夜| 日本精品999| 草草影院日本第一页| 日本A级视频| 亚洲日韩视频二区| 蜜桃精品一区二区三区ww| 啊啊啊啊好多水| 欧美一区二区亚洲天堂| av橘色网站| 午夜高清成人在线视频| 91超碰丝袜制服| 婷婷综合在线| 精品人妻一区二区免费蜜桃视频| 丁香五月成人| 成·人免费午夜在线观看| 国产精品久久久亚洲一区| 久久久亚洲| 日本 成 人 小说 电影 一区二区| 视频一区二区三区精品| 久久亚码| 色999人与兽| 欧美黄色手机在线观看| 婷婷性爱| 国产综合永久精品日韩鬼片| 色九九久九九| 国产专区路线| 一区二区三区在线美女| 搡老女人老91妇女熟女| 国产亚州精品美女久久久免费| 大香久久| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 美女国产一区二区久久| 97亚洲综合在线| 亚洲操操操| 欧美日韩中文视频播放| 歐美性天天| 国产亚洲99久久精品| 日韩av免费一级电影| 大香蕉99热| 欧美日韩操逼嗦吊| 丰满人妻一区二区三区大胸懂色 | 中文字幕 国产 精品| 精品三级在线专区| 亚洲天堂资源| 欧美成人一区二区| 婷婷激情综合网| 久久久久久网址| 久久丝袜| 国产99热| 欧洲在线性爱视频| 精品999日本| 澳门人妻久久| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 青青草在线视频欧美| 91呆哥人妻| 国产十八禁视频| 亚洲伊人久久精品狠狠在线| 一区,二区,三区网站| 人人妻人人狠人人| 蜜臀99久久精品久久久久| 骚鸭AV| 国产丰满少妇久久久精品影院| 亚洲免费看片| 无遮挡猛进视频免费无限观看| 国产亚洲美日韩Aⅴ中文字幕无码成人| 91碰超| 色噜噜人妻丝袜a∨先锋影| 大学生美女口爆| 欧美天天弄| 久草婷婷| 蜜臀aV午夜一区二区三区| 色男人色天堂东京热| 亚洲。日韩。欧美| 乱欲一区二区| 一区在线国产播放| 亚州操逼网| 国产69精品久久久久99尤物| 国产精品岛国片在线观看| 天天干天天操天天操夜夜操天天操 | 欧州一区二区三区四区| 在线色导航| 二男一女成人A片| 九九色逼| 韩日精品福利视频一区不卡在线免| a啊啊啊啊啊啊啊啊一区二区| 亚洲中字幕日本一区二区三区| 蜜臀无码视频在线观看| 国产美女裸体秘 永久无遮挡| 久久久成人国产精品无码| 五月丁香激情综合网| 色999人与兽| 狠狠躁日日躁夜夜躁A| 久热精品在线| 97 色综合| 一区二区三区成人高清视频| 久久久久久亚洲精品中文字幕人妻| 亚洲不卡不卡中文字幕不卡| 色香阁在线| 人人综合| 亚洲国产精品有声| 日韩一区二区高清在线观看的| 狠狠综合| 激情内射| 少妇xx精品| 久久久婷| 性欧美第一页| 黄色区免费观看中文字幕| 国产亚洲综合欧美一区| 国产亚洲精品美女| 日韩av电影网站| 国产多人在线观看视频| www.色婷婷| 久久久久七视频| 久久97精品久久久久久久不卡| 日韩成人网址| 亚洲人妖网| 国语av狠狠色丁香婷婷综合激情| 欧美躁死她一区二区| 国产精品99久久久www| 天天日日本| 啊啊啊啊啊在线| 人妻天堂综合网| 亚洲女优有码无码高清| 免费家庭乱伦视频| 开心五月深爱五月| www.高清无码诱惑一区.com| 亚洲欧美国产中文视频| 久久av网| 成年女人黄网站| 大乔未久88一区| 精品无码一区二区三区| 蜜桃精久三区| 亚洲影院365| 歐美一級亂黃99在綫精品| 久久久久久久唑| 亚洲天堂区| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 思思热影视| 高清肉丝中文无码| 高清一区AV无码| 熟女91网站| 国内三级自拍小视频在线观看| 久久二| 伊人991| 看一级黄色视频| 91丝袜| 亚洲一区亚洲天堂| 日韩精品资源专区二区| 久久久久久91香蕉国产| 少妇滛荡视频| gogogo免费高清看中国国语| 欧美精品亚洲精品日韩传电影| 狠狠狠一区二区三区| 美女操逼A A| 国产91丝袜 在线播放| 97亚洲综合电影| 少妇高潮特黄A片| 欧美色图私拍91| 亚洲 欧美日韩 另类| 91丰满| 九九人妻| 操老熟女AV| 91狠婷| 97自拍视频在线| 一本久道久久综合狠狠爱一密臀精| 99色视频| 激情五月天视频| 欧美操逼熟女| 色综合国产在线观看| 91精品少妇搡搡搡| 狠狠综合| 韩日性爱av| 91精品无码久久久久久久| 97网站在线观看 | 秋霞免费无码视频日韩A片| 91色欧美| 91美女在线视频| 久久久久亚洲一区女同性恋中文字幕| 91人人看| 最新亚洲风情电影| 丁香六月婷婷| 日本性爱网址| www.91理论| 三级AV入口| 69天堂| 欧美色宗合| 亚洲 暴爽 AV人人爽日日碰| av天堂加勒比| 中文字幕在线观看网页| 91n美女视频| 日本天天吊| 性性久久| 欧美丝袜中文字幕07在线| 在线视频资源| 一本色道无码DVD中文字幕| 男人久久天堂| 中文字幕欧美日韩三级| 视频国产成人精品日本亚洲18| 国产丝袜欧美在线视频| WWW啪啪的com| 肉嘟嘟www视频在线观看高清| 国产视频不卡在线观看| 日本123区操B视频| 成人免费看吃奶视频网站| 亚洲熟女av中文字幕| 秋霞福利网| 超碰导航97| 亚洲乱色视频一区、二区在线| 黄久在线| 成人国产视频在线观看| 日韩一级特黄av毛片| 日韩中文字幕国产| 韩国免费播放一级毛片| 性色avv| 婷婷丁香五月激情啪啪| 6080yy午夜理论三级一区二区三区无码| 成人午夜高潮av猛片| 熟妇国产免费一区| 女人被添高潮免费视频| TS人妖另类精品视频系列 | 国产精品熟女九九九| 激情五月天网站| 欧美人妻久久精品二区三区 | 亚洲色偷偷色噜噜狠狠99网| av在线一区二区三区| 人人操欧美风骚| 日本天天干天天日一区| 亚洲三级网址久久最新| 国产成人午夜视频网址| 亚洲无线观看久久| 日日嗨AV一区二区夜夜| 亚洲、日韩、综合、另类| 五月丁香啪啪啪| 曰韩av中文字幕专区| 乳欲人妻办公室奶水| 影音先锋日本乱伦| 超碰导航97| 老女人91| 亚洲欧美一区二区不卡视频播放 | 日本天天干天天搞一区| 天天做天天爱天天爽| 亚洲黄色视频在线观看视频| 精品无码久久久久久久杏吧| 翔田千里A片一区二区| 欧美亚洲激情| 国产久久久| 亚洲影视高清第一页| 亚洲女人毛茸茸91| 老鸭窝黄色视频网站| 97精品第3页| 青青草成人视频在线观看二区| 国产性刺激| 日本淫穴在线| 啊啊啊久久久视频| 吉川爱美98堂在线| 淫妻综合网| 五月丁香综合激情| www.99热| 久久国产精品熟女人妻| 曰韩少妇无码| 欧美综合综合| 午夜操一操| 国产精品极品美女视频| 成人日本视频人妻在线| 久色网| 99热色这里只有精品| 天天综合网入口~91| 一二视频神马久久传媒| 97亚洲综合在线| 97超碰碰| 欧美亚洲尤物久久| 蜜臀AV成人精品蜜臀AV久久| 色悠久久久av| 日韩 女同 综合| 黄色工厂这里只有精品| 国产在线视频午夜精华在| 成年女人黄网站| 99色色网| 天天干1区2区在线| 伊人在线大香蕉二。| 蜜臀99久久| 91在线精品| 天美一二三在线观看Av| 久久6热精品99视频| 亚洲狠狠入| 亚洲色欲天天天堂色欲网女| 日韩欧美女优电影| 久久偷拍人| 欧美色视| 美女黄色一级A视频| 97超碰这里只有精品| w w w.久久精品| 成全在线观看免费观看| 99热综合在线| 2017,超碰| 国产精品探花视频| 极品五月天噜噜| 男人天堂导航| 欧美日日操| 蜜奶av| 日本一道在线播放高清| 91久久久久久久久18| 9精品久久| 亚洲综合在线第一页| 大香蕉520| 97网站在线观看| 黄色区免费观看中文字幕| 大奶尤物鲍汁淫荡欧美视频粉嫩夜夜骚| 麻豆亚洲AV成人无码久久精品| 久久人人爽爽人人爽人人片αV| 欧亚日韩三区| 中文字幕一区二区三区50路| 天天干天天拍| 天天欧美| 天天综合精品| 极品一区二区三区免费| 人干人人人操人人摸| 伊人991| 精品一啪| 人妻大香蕉| 日韩欧美经典在线观看| 97超碰超欧美。| 国产在线播放成人免费| 欧美天天谢综合网| 人人妻人人爱人人玩| 黄页18禁| 午夜啪| 少妇精品久久久| 黄色免费网页无码| 射丝袜高跟鞋99| 国产精品999aaa| 亚洲欧美另类少妇精品| 亚洲图片激情综合另类| 很很很很操| 国产精品麻豆视频网站| 婷婷五月天色网| 狠狠久久亚洲欧美专区| 国产超碰97| 久久午夜伦| 久久中文字幕一区不卡| 东北女人| 午夜福利精品| 亚洲欧美洲综合| 欧美72网页| 日本国产成人亚洲精品无码| 丁香色狠狠色综合久久小说| 天天天操天天天爱| 抽插无码高清一区| 日韩另类| 日韩无码三级影院| 碰超人人在线一区二区三区| 东京太热久久久| 伊人五月天激情| 欧美亚洲手机在线| 国产成人精品亚洲日本| 校园春色美腿丝袜| 蜜臀av一区二区三区免费观看| 国产成人欧美一区二区三区的国产| 精品国产AV一区天美传媒| 国产AV人人 夜夜人人澡| 欧美黄色大香蕉一区二区| 上床啊啊啊| 欧美日韩人妻婷婷一区| 尤物av网站| 五月天婷婷成人网| 天天日天天搞天天干| 色姑娘综合网| 久久精品无码熟妇一区二区三区视频导航 | 99在线啪| 丝袜亚洲91| 97硬碰| 特级大荫道BBwBBwBBW| 久久97| 91三级理论片播放器| 亚洲春色一区二区三区| 一区二区三区一亚洲中文字幕、综合区灬 | 欧美经典一区二区三区| 国产精品直播在线观看直播| 97视频在线观看网站| 精品性爱久久视频| 国产精品青草综合久久| 天天操天天射天天日| 亚洲国产成人精品999| 中文字幕黄色一起草| 精品一久久久| 你草精品在线视频| 日韩精品99999| 99热在线播放| 99超级碰免费视频| 老熟女乱伦一区| 九九精品无码专区免费| 丰满美女一级毛片在线播放| 秋霞一级A片黄色视频| 伊色久人大在线| 国产免费内射视频| 一区二区三区四区五区久久久久久| 日产精品久久久一区二区| 亚洲一区二区专区-国产丝袜精品丝袜-成人AV | 亚洲无码偷拍| 久久免费99精品久久久久久| dy888午夜老子影视达达兔 | 99re99视频在线免费观看| 天天操天天射青青草| 97网址www| 久久九七| 丝袜视频网国产90| 国产精品一区二区后入| 色吧综合网| 激情综合五月婷婷| www激情| 99九九久久| 色777999综合| 亚洲欧美洲综合| 日本成人免费一区二区三区| 免费国产电影一区二区| 人人干黄色| 无码精品久久| 国语对白在线播放视频| 屁屁影院一区二区三区国产| 欧美躁死她一区二区| 亚洲人在线| 欧美在线|亚洲| 色波多| 国产午夜无码片在线观看影视 | 亚洲色电影在线| 亚洲欧美电影| 亚洲欧美日韩精品久久久一区二区| av天堂影视中文在字幕在线中文| 日韩性爱电影一区| 天美一区在线| 久久免费少妇| 欧美在线观看综合国产| 丝袜狠狠草尤物人妻av91| 秋霞午夜视频一区二区| 亚洲精品久久久久久| 黄页av| 色哟哟511老熟女| 射 色综合| 亚洲se电影| 青青草国产欧美非洲黑人| 国产亚洲日韩欧| 91 刺激在线| 亚洲综合另类色图| 国产97色在线 | 亚洲| 天天干天天燥| 天堂av2019| 视频二区美腿制服人妻欧美| 欧美自拍偷拍免费观看| 97免费免费视频网| 成人熟女区| 友优传媒精品在线一区二区| 久久男女激情视频网站| 亚洲男人天堂2012| 91日产桃蜜| 亚洲av国产av综合av卡| 一色网男人的天堂| 97国产精品久久久久| 伊人一区二区在线播放| 五月丁香激情综合网| 91久久久久| www.91理论| 亚洲一区亚洲天堂| 美女天天干| 97精品视频免费| 被男人吃奶很爽的毛片| 性欧美天天| 成人无码在线超碰网| 久插不卡| 操高情无码| 狠狠爱夜夜干| 亚洲成人性爱网站在线播放| 亚洲人在线成线成人| 91免费看一区二区三区| 中文字幕乱码人妻一区二区三区,99精品 | 成人热久久精品| 欧 美 自 拍 偷 拍| 97精品久久久久中文字幕| 粉嫩av在线一区二区| 日韩 成人 有码| 91小视频| 日韩欧美~中文字| 国产对白刺激视频| 91夜色chaopeng| 日韩亚洲中文有码视频| 超碰在线成人电影| 8050无码八戒| 蜜臀久久久国产| 久久综合亚洲色1080p| 超碰久久草| 五月天婷婷综合网| 国产精品色|