TWI507032B - And a display method and a device for preventing the display of the abnormality of the screen display - Google Patents
And a display method and a device for preventing the display of the abnormality of the screen display Download PDFInfo
- Publication number
- TWI507032B TWI507032B TW101122236A TW101122236A TWI507032B TW I507032 B TWI507032 B TW I507032B TW 101122236 A TW101122236 A TW 101122236A TW 101122236 A TW101122236 A TW 101122236A TW I507032 B TWI507032 B TW I507032B
- Authority
- TW
- Taiwan
- Prior art keywords
- format
- image
- display
- signal
- current
- Prior art date
Links
Landscapes
- Controls And Circuits For Display Device (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
本發明是有關於一種影像的顯示方法及顯示裝置，特別是指一種預防訊號切換導致畫面顯示異常的顯示方法及其裝置。
由於3D技術日臻成熟，因此相關產品也漸漸地出現在人們的日常生活當中，例如可輸出3D影像的顯示器。一般而言，上述的顯示器採用版本為「1.4」的高清晰度多媒體介面(High Definition Multimedia Interface，HDMI)接收來源訊號、畫面與數位資料，例如720p訊號或1080p訊號，2D畫面或3D畫面。其中3D畫面若以像素(Pixel)的排列方式進一步區分，主要可以分為三種態樣，其分別是影像框封裝(Frame Packing)、影像左右並排(Side by Side)、影像上下並排(Top Bottom)等等。而數位資料代表的即是畫面的排列態樣。
正常來說，當顯示器持續地接收畫面，顯示器並無法從畫面得知該畫面是2D畫面或者是3D畫面，故顯示器會判斷來源訊號處於穩定狀態。然而當來源訊號相異時，例如，顯示器所接收的來源訊號由720p訊號轉換為1080p訊號時，顯示器會判斷來源訊號處於不穩定狀態。在此種不穩定狀態下，顯示器可以偵測到此不穩定狀態而重新採用正確的顯示格式，亦即，顯示器採用的顯示格式與來源訊號的輸入格式是一致的(例，同為3D畫面的格式)，因此顯
示器可以正常輸出顯示畫面。
然而，當訊號源維持原訊號送出，只是畫面由2D畫面轉換成態樣為「影像左右並排」或者是「影像上下並排」的3D畫面時，雖然畫面與數位資料已經改變，但現有的顯示器卻仍會判定來源訊號處於穩定狀態。故現有的顯示器不會重新採用正確的顯示格式，使得其所採用的顯示格式與來源訊號的輸入格式是不一致的，因而造成無法正確顯示畫面的現象。
此時，使用者必須重新插拔高清晰度多媒體介面的連接器(Cable)或重新啟動顯示器，使得顯示器得以重新採用與來源訊號的輸入格式一致的顯示格式，才能正常輸出顯示畫面。然此種解決方式卻會造成使用者使用上的不便。
因此，本發明之目的，即在提供一種預防畫面與數位資料切換導致畫面顯示異常的顯示方法。
於是，本發明預防訊號切換導致畫面顯示異常的顯示方法，包含以下步驟：(A)該縮放控制器接收一影像訊號，以供該微處理器根據該影像訊號獲得一對應該影像訊號的目前時序資料；(B)該微處理器根據該目前時序資料與一預設的初始時序資料判斷該影像訊號是否處於穩定狀態；(C)若該影像訊號處於穩定狀態，則該微處理器判斷該縮放控制器是否已產生一影像畫面，若該影像訊號處於非穩定狀態，則該縮放控制器不產生任何的影像畫面；(D)若該縮放控制器已產生該影像畫面，則該微處理器判斷該
目前時序資料是否包含一3D格式指示資料；(E)若該目前時序資料包含該3D格式指示資料，則該微處理器將一目前影像格式設定為該輸入訊號的3D格式，若該目前時序資料不包含該3D格式指示資料，則該微處理器將該目前影像格式設定為2D格式；(F)該微處理器判斷該目前影像格式是否與一預設的顯示影像格式匹配，其中該顯示影像格式預設為該輸入訊號的3D格式與2D格式其中一者；(G)若該目前影像格式與該顯示影像格式不匹配，則將該顯示影像格式設定為該目前影像格式；及(H)該縮放控制器根據該顯示影像格式重新產生該影像畫面。
本發明之另一目的，即在提供一種預防訊號切換導致畫面顯示異常的顯示裝置。
於是，本發明預防訊號切換導致畫面顯示異常的顯示裝置，包含一縮放控制器，及一微處理器。
該縮放控制器用以接收一影像訊號。
該微處理器用以根據該影像訊號獲得一對應該影像訊號的目前時序資料。
該微處理器根據該目前時序資料與一預設的初始時序資料判斷該影像訊號是否處於穩定狀態。若該影像訊號處於穩定狀態，則該微處理器判斷該縮放控制器是否已產生一影像畫面；若該影像訊號處於非穩定狀態，則該縮放控制器不產生任何的影像畫面。
若該縮放控制器已產生該影像畫面，則該微處理器判斷該目前時序資料是否包含一3D格式指示資料。
若該目前時序資料包含該3D格式指示資料，則該微處理器將一目前影像格式設定為該輸入訊號的3D格式；若該時序資料不包含該3D格式指示資料，則該微處理器將該目前影像格式設定為2D格式。
接著該微處理器判斷該目前影像格式是否與一預設的顯示影像格式匹配。若該目前影像格式與該顯示影像格式不匹配，則將該顯示影像格式設定為該目前影像格式。其中該顯示影像格式預設為該輸入訊號的3D格式與2D格式其中一者。
繼而該縮放控制器根據該顯示影像格式重新產生該影像畫面。
有關本發明之前述及其他技術內容、特點與功效，在以下配合參考圖式之一個較佳實施例的詳細說明中，將可清楚的呈現。
參閱圖1與圖2，本發明預防訊號切換導致畫面顯示異常的顯示裝置1之較佳實施例包含一縮放控制器(Scaler)11、一與該縮放控制器11電連接的微處理器(Micro Controller，MCU)12，及一與該縮放控制器11電連接的顯示器13。
在本較佳實施例中，該顯示裝置1採用版本為「1.4」的高清晰度多媒體介面接收一影像訊號，例如2D畫面或者是3D畫面。
該縮放控制器11用以接收該影像訊號，並產生一影像畫面。
該微處理器12用以根據該影像訊號獲得一對應該影像訊號的目前時序資料。其中該目前時序資料包括對應該影像訊號的一訊號頻率值、一解析度值，及一掃描頻率值。
該顯示器13用以顯示該縮放控制器11產生的該影像畫面。
以下配合一預防訊號切換導致畫面顯示異常的顯示方法，針對上述的縮放控制器11、微處理器12，及顯示器13之間的互動進一步地說明。
首先，當使用者啟動該顯示裝置1後，該縮放控制器11，及該微處理器12便開始運作。
如步驟S21所示，該縮放控制器11接收該影像訊號，以供該微處理器12根據該影像訊號，獲得對應該影像訊號的該目前時序資料。亦即，該微處理器12會解析該影像訊號以獲得該目前時序資料。其中如同上述所提，該目前時序資料包括該訊號頻率值、該解析度值，及該掃描頻率值等資訊。
如步驟S22所示，該微處理器12根據該目前時序資料與一預設的初始時序資料，判斷該影像訊號是否處於穩定狀態。在本較佳實施例中，該預設的初始時序資料可以包括對應2D訊號的訊號頻率值、解析度值，及掃描頻率值等資訊，亦可以包括對應3D訊號的訊號頻率值、解析度值，及掃描頻率值等資訊。
在本較佳實施例中，當該目前時序資料包括的訊號頻率值、解析度值與掃描頻率值，分別與該初始時序資料包
括的訊號頻率值、解析度值與掃描頻率值相等時，則該微處理器12判斷該影像訊號處於穩定狀態。換句話說，若該目前時序資料包括的訊號頻率值、解析度值與掃描頻率值其中至少一者，與該初始時序資料包括的訊號頻率值、解析度值與掃描頻率值不相等時，則該微處理器12判斷該影像訊號處於不穩定狀態。一般而言，當該微處理器12判斷該影像訊號處於不穩定狀態時，該縮放控制器11不會產生任何的影像畫面，亦即，該顯示器13無法顯示任何的影像畫面供使用者觀賞。
舉例來說，假設該目前時序資料的解析度值為「1280＊
720」，而該初始時序資料的解析度值為「1920＊
1080」，則該微處理器12判斷該影像訊號處於不穩定狀態，且該縮放控制器11不會產生供該顯示器13顯示的影像畫面。
如步驟S23所示，若該影像訊號處於穩定狀態，則該微處理器12判斷該縮放控制器11是否已產生一影像畫面。
如步驟S24所示，若該縮放控制器11已產生該影像畫面，則該微處理器12判斷該目前時序資料是否包含一3D格式指示資料。
在本較佳實施例中，該3D格式指示資料主要由高清晰度多媒體介面架構中的HDMI Vendor Specific InfoFrame Packet Contents的第五個位元組(PB4)中的第七個位元、第六個位元，及第五個位元所組成。更進一步的說，當上述三個位元由高位元至低位元的排列組合為「010」時，則該微處理器12判斷該目前時序資料包含該3D格式指示資料
。反之，當上述三個位元由高位元至低位元的排列組合非為「010」時，則該微處理器12判斷該目前時序資料不包含該3D格式指示資料。
值得一提的是，當該影像訊號為3D訊號時，該微處理器12還可根據高清晰度多媒體介面架構中的HDMI Vendor Specific InfoFrame Packet Contents的第六個位元組(PB5)中的第七個位元、第六個位元、第五個位元，及第四個位元的排列組合，判斷該影像訊號為何種態樣的3D訊號。
舉例來說，假設上述四個位元由高位元至低位元的排列組合為「0000」時，則該微處理器12判斷該影像訊號的態樣為「影像框封裝」。類似地，假設上述四個位元由高位元至低位元的排列組合為「1000」時，則該微處理器12判斷該影像訊號的態樣為「影像左右並排」。類似地，假設上述四個位元由高位元至低位元的排列組合為「0110」時，則該微處理器12判斷該影像訊號的態樣為「影像上下並排」。
如步驟S25與步驟S26所示，若該目前時序資料包含該3D格式指示資料，則該微處理器12將一目前影像格式設定為該輸入訊號的3D格式。若該目前時序資料不包含該3D格式指示資料，則該微處理器12將該目前影像格式設定為2D格式。在本較佳實施例中，該目前影像格式為一用來代表該影像訊號的影像格式的變數。也就是說，該微處理器12會根據該目前時序資料包含該3D格式指示資料與否，將該目前影像格式設定為該輸入訊號的3D格式或2D格
式。
如步驟S27所示，該微處理器12判斷該目前影像格式是否與一預設的顯示影像格式匹配。其中該顯示影像格式預設為該輸入訊號的3D格式與2D格式其中一者。也就是說，該預設的顯示影像格式代表該顯示器13已經在顯示中的影像畫面的影像格式，而該目前影像格式則代表該縮放控制器11剛接收到的影像訊號的影像格式。
如步驟S28所示，若該目前影像格式與該顯示影像格式不匹配，則將該顯示影像格式設定為該目前影像格式。亦即，當顯示中的影像畫面的影像格式與剛接收到的影像訊號的影像格式不相同時，該微處理器12會重新將該顯示影像格式設定為該目前影像格式。
舉例來說，假設該顯示影像格式為2D格式，而該目前影像格式為3D格式，則該微處理器12會將該顯示影像格式重新設定為3D格式。類似地，假設該顯示影像格式為3D影像左右並排格式，而該目前影像格式為3D影像上下並排格式，則該微處理器12會將該顯示影像格式重新設定為3D影像上下並排格式，使得顯示中的影像畫面的影像格式與剛接收到的影像訊號的影像格式是一致的。
又，若該目前影像格式與該顯示影像格式匹配，則代表顯示中的影像畫面的影像格式與剛接收到的影像訊號的影像格式是相同的，因此不存在影像格式不一致而導致該縮放控制器11無法正確顯示畫面的問題。故該縮放控制器11將持續地接收影像訊號，以遞迴地進行本發明的步驟。
如步驟S29所示，該縮放控制器11根據該顯示影像格式重新產生該影像畫面。此刻該顯示影像格式與該目前影像格式已一致，故該縮放控制器11得以產生供該顯示器13顯示的該影像畫面。
值得一提的是，在步驟S23中，雖然該影像訊號處於穩定狀態，但若該縮放控制器11尚未產生該影像畫面時，則會進行下列步驟S31至步驟S34。
如步驟S31所示，該微處理器12判斷該目前時序資料是否包含該3D格式指示資料。其中該3D格式指示資料的判斷細節如同步驟S24所描述，故不再贅述。
如步驟S32與步驟S33所示，若該目前時序資料包含該3D格式指示資料，則將一顯示影像格式設定為該輸入訊號的3D格式，若該目前時序資料不包含該3D格式指示資料，則將該顯示影像格式設定為2D格式。
由於此刻該縮放控制器尚未產生該影像畫面，因此並不存在顯示中的影像畫面的影像格式與剛接收到的影像訊號的影像格式不一致的問題。惟該微處理器12仍需將該顯示影像格式設定為2D格式或者是該輸入訊號的3D格式其中一者，以做為該縮放控制器11產生影像畫面時的依據。
如步驟S34所示，該縮放控制器11根據該顯示影像格式產生該影像畫面。舉例來說，假設該顯示影像格式為2D格式，則該縮放控制器11產生供該顯示器13顯示的為2D格式的影像畫面。類似地，假設該顯示影像格式為3D格式，則該縮放控制器11產生供該顯示器13顯示的為3D格式
的影像畫面。
綜上所述，當該影像訊號處於穩定狀態時，該微處理器仍會持續地判斷該目前時序資料是否包含該3D格式指示資料，以將該目前影像格式設定為3D格式或者是2D格式，並使得該顯示影像格式與該目前影像格式匹配，使得該顯示器能正常地輸出該影像畫面，而無需透過使用者重新插拔高清晰度多媒體介面的連接器或重新啟動該顯示裝置，故確實能達成本發明之目的。
惟以上所述者，僅為本發明之較佳實施例而已，當不能以此限定本發明實施之範圍，即大凡依本發明申請專利範圍及發明說明內容所作之簡單的等效變化與修飾，皆仍屬本發明專利涵蓋之範圍內。
1‧‧‧預防訊號切換導致畫面顯示異常的顯示裝置
11‧‧‧縮放控制器
12‧‧‧微處理器
13‧‧‧顯示器
S21~S29‧‧‧步驟
S31~S34‧‧‧步驟
圖1是一系統圖，說明本發明預防訊號切換導致畫面顯示異常的顯示裝置的較佳實施例；及圖2是一流程圖，說明對應本較佳實施例的一預防訊號切換導致畫面顯示異常的顯示方法的步驟。
S21~S29‧‧‧步驟
S31~S34‧‧‧步驟
Claims (10)
- 一種預防訊號切換導致畫面顯示異常的顯示方法，適用於一用以顯示2D畫面或3D畫面的顯示裝置，該顯示裝置包含一縮放控制器與一微處理器，該顯示方法包含以下步驟：(A)該縮放控制器接收一影像訊號，以供該微處理器根據該影像訊號獲得一對應該影像訊號的目前時序資料；(B)該微處理器根據該目前時序資料與一預設的初始時序資料判斷該影像訊號是否處於穩定狀態；(C)若該影像訊號處於穩定狀態，則該微處理器判斷該縮放控制器是否已產生一影像畫面，若該影像訊號處於非穩定狀態，則該縮放控制器不產生任何的影像畫面；(D)若該縮放控制器已產生該影像畫面，則該微處理器判斷該目前時序資料是否包含一3D格式指示資料；(E)若該目前時序資料包含該3D格式指示資料，則該微處理器將一目前影像格式設定為該輸入訊號的3D格式，若該目前時序資料不包含該3D格式指示資料，則該微處理器將該目前影像格式設定為2D格式；(F)該微處理器判斷該目前影像格式是否與一預設的顯示影像格式匹配，其中該顯示影像格式預設為該輸入訊號的3D格式與2D格式其中一者； (G)若該目前影像格式與該顯示影像格式不匹配，則將該顯示影像格式設定為該目前影像格式；及(H)該縮放控制器根據該顯示影像格式重新產生該影像畫面。
- 根據申請專利範圍第1項所述的預防訊號切換導致畫面顯示異常的顯示方法，其中在步驟(D)中若該縮放控制器尚未產生該影像畫面，則進行步驟(I)：(I)該微處理器判斷該目前時序資料是否包含一3D格式指示資料。
- 根據申請專利範圍第2項所述的預防訊號切換導致畫面顯示異常的顯示方法，其中在步驟(I)後還包含一步驟(J)：(J)若該目前時序資料包含該3D格式指示資料，則將一顯示影像格式設定為該輸入訊號的3D格式，若該目前時序資料不包含該3D格式指示資料，則將該顯示影像格式設定為2D格式。
- 根據申請專利範圍第3項所述的預防訊號切換導致畫面顯示異常的顯示方法，其中在步驟(J)後還包含一步驟(K)：(K)該縮放控制器根據該顯示影像格式產生該影像畫面。
- 根據申請專利範圍第1項所述的預防訊號切換導致畫面顯示異常的顯示方法，其中在步驟(B)中該目前時序資料與該初始時序資料分別對應一訊號頻率值、一解析 度值，及一掃描頻率值，當該目前時序資料對應的訊號頻率值、解析度值與掃描頻率值分別與該初始時序資料對應的訊號頻率值、解析度值與掃描頻率值相等時，則該微處理器判斷該影像訊號處於穩定狀態。
- 一種預防訊號切換導致畫面顯示異常的顯示裝置，包含：一縮放控制器，用以接收一影像訊號；及一微處理器，根據該影像訊號獲得一對應該影像訊號的目前時序資料；其中該微處理器根據該目前時序資料與一預設的初始時序資料判斷該影像訊號是否處於穩定狀態，若該影像訊號處於穩定狀態，則該微處理器判斷該縮放控制器是否已產生一影像畫面，若該影像訊號處於非穩定狀態，則該縮放控制器不產生任何的影像畫面，若該縮放控制器已產生該影像畫面，則該微處理器判斷該目前時序資料是否包含一3D格式指示資料，若該目前時序資料包含該3D格式指示資料，則該微處理器將一目前影像格式設定為該輸入訊號的3D格式，若該時序資料不包含該3D格式指示資料，則該微處理器將該目前影像格式設定為2D格式，接著該微處理器判斷該目前影像格式是否與一預設的顯示影像格式匹配，若該目前影像格式與該顯示影像格式不匹配，則將該顯示影像格式設定為該目前影像格式，繼而該縮放控制器根據該顯示影像格式重新產生該影像畫面，其中該顯示影像格式預設為該輸入 訊號的3D格式與2D格式其中一者。
- 根據申請專利範圍第6項所述的預防訊號切換導致畫面顯示異常的顯示裝置，其中若該縮放控制器尚未產生該影像畫面，則該微處理器判斷該目前時序資料是否包含一3D格式指示資料。
- 根據申請專利範圍第7項所述的預防訊號切換導致畫面顯示異常的顯示裝置，其中若該目前時序資料包含該3D格式指示資料，則將一顯示影像格式設定為該輸入訊號的3D格式，若該目前時序資料不包含該3D格式指示資料，則將該顯示影像格式設定為2D格式。
- 根據申請專利範圍第8項所述的預防訊號切換導致畫面顯示異常的顯示裝置，其中該縮放控制器根據該顯示影像格式產生該影像畫面。
- 根據申請專利範圍第6項所述的預防訊號切換導致畫面顯示異常的顯示裝置，其中該目前時序資料與該初始時序資料分別對應一訊號頻率值、一解析度值，及一掃描頻率值，當該目前時序資料對應的訊號頻率值、解析度值與掃描頻率值分別與該初始時序資料對應的訊號頻率值、解析度值與掃描頻率值相等時，則該微處理器判斷該影像訊號處於穩定狀態。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW101122236A TWI507032B (zh) | 2012-06-21 | 2012-06-21 | And a display method and a device for preventing the display of the abnormality of the screen display |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW101122236A TWI507032B (zh) | 2012-06-21 | 2012-06-21 | And a display method and a device for preventing the display of the abnormality of the screen display |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201401866A TW201401866A (zh) | 2014-01-01 |
| TWI507032B true TWI507032B (zh) | 2015-11-01 |
Family
ID=50345252
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW101122236A TWI507032B (zh) | 2012-06-21 | 2012-06-21 | And a display method and a device for preventing the display of the abnormality of the screen display |
Country Status (1)
| Country | Link |
|---|---|
| TW (1) | TWI507032B (zh) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0738872A2 (en) * | 1995-04-21 | 1996-10-23 | Matsushita Electric Industrial Co., Ltd. | Stereo matching method and disparity measuring method |
| WO2010038365A1 (ja) * | 2008-09-30 | 2010-04-08 | パナソニック株式会社 | 3d映像に係る記録媒体、再生装置、システムlsi、再生方法、眼鏡、表示装置 |
| US20100238327A1 (en) * | 2009-03-19 | 2010-09-23 | Griffith John D | Dual Sensor Camera |
-
2012
- 2012-06-21 TW TW101122236A patent/TWI507032B/zh not_active IP Right Cessation
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0738872A2 (en) * | 1995-04-21 | 1996-10-23 | Matsushita Electric Industrial Co., Ltd. | Stereo matching method and disparity measuring method |
| WO2010038365A1 (ja) * | 2008-09-30 | 2010-04-08 | パナソニック株式会社 | 3d映像に係る記録媒体、再生装置、システムlsi、再生方法、眼鏡、表示装置 |
| US20100238327A1 (en) * | 2009-03-19 | 2010-09-23 | Griffith John D | Dual Sensor Camera |
Also Published As
| Publication number | Publication date |
|---|---|
| TW201401866A (zh) | 2014-01-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9398245B2 (en) | Display device | |
| TWI457855B (zh) | 影像調整裝置及影像調整方法 | |
| US9996893B2 (en) | Display apparatus constituting multi display system and control method thereof | |
| WO2017032081A1 (zh) | 一种音视频播放设备、数据显示方法与存储介质 | |
| US8698963B1 (en) | Projection system and operation method thereof | |
| EP2429197B1 (en) | A method and a system for generating a signal for a video display unit | |
| WO2019205665A1 (zh) | 显示器自监控方法以及显示器 | |
| CA2888926A1 (en) | Method and device for processing video image | |
| US10866915B2 (en) | Method for increasing the compatibility of displayport | |
| US9778894B2 (en) | System and method for outputting extended display identification data to another electronic device to achieve power savings | |
| TWI478579B (zh) | ３ｄ影像顯示方法及介面單元 | |
| KR100737312B1 (ko) | 디브이아이/에이치디엠아이 출력장치 및 그 제어방법 | |
| JP2009188692A (ja) | デジタル信号処理装置、表示装置およびプログラム | |
| JP2014153548A (ja) | 画像投影装置、更新方法及びプログラム | |
| JP2015165617A (ja) | 映像表示装置 | |
| TWI507032B (zh) | And a display method and a device for preventing the display of the abnormality of the screen display | |
| US20130235061A1 (en) | Video processing apparatus and system for correcting video signal | |
| KR100677237B1 (ko) | 듀얼 엘시디를 구비한 영상 표시장치 | |
| US20160156843A1 (en) | Image processing apparatus | |
| CN107846588B (zh) | 电视中串口记录信息的获取方法和装置 | |
| JP2014134755A (ja) | 表示装置、表示方法、テレビジョン受像機、プログラムおよび記録媒体 | |
| CN103544932A (zh) | 预防讯号切换导致画面显示异常的显示方法及其显示设备 | |
| JP2012065160A (ja) | 動画像処理装置および動画像処理方法 | |
| JP2008022390A (ja) | 映像波形マルチ表示装置及びマルチ表示方法 | |
| KR20100116850A (ko) | 디스플레이 장치 세팅방법 및 이를 적용한 디스플레이 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | Annulment or lapse of patent due to non-payment of fees |